Замок представляет собой квадратное в плане сооружение с выступающими по углам башнями
высотой около 25 м. Пятая, западная башня, является воротной, и некогда имела подъемный мост через широкий ров. Толщина стен достигала 3 м при высоте около 13 м. Система из двух рядов бойниц обеспечивала круговой обстрел (позднее, при строительстве дворца, многие бойницы заменили сводчатыми окнами).
Обширные подземелья замка образуют сложную систему вспомогательных помещений, по площади превосходящую наземную часть сооружения в несколько раз. Сам замок выстроен из простого красного кирпича.

В конце XIX века на месте озера был яблоневый сад.Князь Николай Святополк-Мирский распорядился
его вырубить и на этом месте выкопать озеро. Время было весеннее, все яблони стояли в цвету. Жители Мира отказались рубить деревья. По народному поверью, рубить цветущее дерево — большой грех, люди, которые губят молодую жизнь, будут прокляты, а их род будут преследовать несчастья. Но князь не хотел отказываться от своей задумки и терять время. Несколько деревьев он вырубил первым, а остальные — уничтожили нанятые им люди. Начали копать озеро. Говорили, что при его устройстве погибло много людей