Замок поставили на равнине, где протекал ручей и речка Миранка. По углам четырех стен расположились башни, а в центре западной стены, обращенной к дороге на столичную Вильню, встала пятая башня с единственным входом в крепость.Оборонную мощь цитадели определяли не только башни, но и стены, прорезанные бойницами. Их толщина вверху составляла чуть больше двух метров, а внизу – около трех. Западная и северная стены во времена Ильиничей завершались боевыми галереями, которые со стороны двора обрамлялись сосновыми парапетами, а с внешней стороны – брустверами в рост человека с бойницами для ведения огня из луков, арбалетов, мушкетов. Сегодня можно прогуляться по южной галерее, устроенной позже. С нее как на ладони виден внутренний двор замка, где уже на рубеже ХVІ–ХVІІ столетий, когда Мир стал владением Николая Радзивилла Сиротки, поднялись к небу два дворцовых корпуса, сменившие воинственные готические доспехи на вполне мирный ренессансный наряд.
Война с Россией в 1655 году обожгла замок своим горячим дыханием: он был взят штурмом, после чего долгое время находился в запустении. Едва успели кое-что восстановить, как грянула Северная война, а с нею – новые разрушения и потери. Замок отстроили только в 1730-х. Тогда здесь заблистали позолоченной лепниной и дорогими паркетами парадный зал, портретная галерея, зал для танцев. Кароль Станислав Радзивилл устраивал тут пышные балы и охоты, оглашая окрестности Мира стрельбой из пушек и фейерверками.
