Был родовым гнездом Острожских – западнорусского княжеского рода. В 1832 году замок сильно пострадал от пожара и более не восстанавливался. Однако руины замка часто посещают туристы. Из всего замка сохранились Богоявленский собор, Круглая башня, колокольня и несколько фрагментов стен. Самой старинной уцелевшей частью является трехъярусная Мурованная Башня, построенная в XIV веке из песчаника и камня.