Был сооружен на холме Валлимяги в XIII веке, как и предыдущие замки – датчанами. Сначала были построены каменные строения, в XIV веке возведена каменная стена, толщина ее иногда достигала 2 метров. В высоту западная сторона была 7 метров, которая увеличилась со временем. Достраивали замок вплоть до XVI века – основали конвент и угловые башни. В 1602 – 1605 годах замок почти разрушен, перестал быть оборонительным сооружением.