Резиденция Сааре-Ляэнемааского епископа после уничтожения Старого Пярну в 1263 г. была перенесена в Хаапсалу. Очевидно, в конце того же десятилетия было построено регулярное здание главного замка, напоминающее в плане монастырь. Его южный флигель включает в себя собор. Тогда же был заложен просторный форбург типа кастелла с двумя воротами друг против друга. Собор Евангелиста Иоанна является однонефной, трехтравейной, без самостоятельного хорового помещения постройкой. В восточной травее перекрывающий ее домикальный свод с первюрами - восьмидольный; в других - четырехдольные. Стрельчатые формы подпружных арок и окон принадлежат ранней готике, но зато капители полуколонн с декором в виде свитков и растительных мотивов говорят о романском стиле и принадлежат к кругу кельнского мастера, работавшего в рижском соборе св. Марии. Западный фасад сильно изменен в ходе реконструкции 1886-1889 гг. Первоначальный перспективный портал с полукруглым завершением имел декорированные импосты; над его вымпергом располагалось окно-«роза». К северной стороне собора примыкала первоначальная ризница, которая в ходе усовершенствования замка была снесена. Новая двухэтажная ризница, которая имела и оборонное значение, была пристроена к южной стене собора. Уникальной для Прибалтики является возведенная позже круглая капелла, вероятно, служившая баптистерием.
Строительство главного замка продолжалось и в конце XIV в. Тогда были расширены основные зальные помещения в северном флигеле. Над собором был надстроен дополнительный этаж. Последний значительный этап в строительстве замка относится к концу XV - началу XVI в. Предположительно тогда на его западной стороне была возведена круглая Сторожевая башня. Форбург расширили на восток и укрепили башнями с бойницами для огнестрельных орудий. Одновременно были построены новые ворота и над ними установлена рельефная плита с гербом епископа Иоганна IV Кивеля и с датой: 1515. Она, вероятно, свидетельствует об окончании строительных работ. Во время Ливонской войны на территории замка были построены земляные укрепления. В XVII в. замок принадлежал роду де ла Гарди; грандиозные планы его реконструкции, которую предполагали осуществить владельцы, были реализованы лишь частично. Со времен Северной войны замок в развалинах.

© В. Чантурия, Й. Минкявичюс, Ю. Васильев, К. Алттоа, Белоруссия-Литва-Латвия-Эстония, «Искусство», М., 1986 г.