Тем не менее по сей день продолжаются споры о назначении Мирского замка. Изобилующий всевозможными декоративными элементами, построенный в относительно спокойное время и практически на равнине, он едва ли мог использоваться в сугубо оборонительных целях. Язык средневековых орнаментов зачастую сложен, поэтому о характере тех или иных деталей порой можно лишь догадываться. К примеру, неясно, что стало причиной вмуровывания в южную стену замка камня в виде головы барана. Стремление обзавестись магическим талисманом или же образом «святого агнца»? Согласно преданию, если данный камень изменит свое местоположение, то это приведет к полному разрушению замка. Но к счастью, на протяжении нескольких столетий «барашек» никуда не убегал и сейчас не собирается, поэтому основания для паники по поводу разрушения отсутствуют.
Перед смертью основатель архитектурного шедевра, Юрий Ильинич, завещал свои владения четырем сыновьям. Им и суждено было достраивать замок — четырехугольный в плане, с пятью башнями, по количеству детей Ильинича (пятой была дочь Ядвига). Однако злой рок по пятам ходил за потомками Ильинича. Все они умерли в довольно раннем возрасте, даже Ядвига не прожила и 30 лет.
После династии Ильиничей замок перешёл во владение богатейших магнатов Европы — Радзивиллов, которые распоряжались имением до конца XVIII века. В этот период замок достраивался и совершенствовался в соответствии с требованиями тогдашней моды: вдоль северной и восточной стен вырос трехэтажный дворец, вдоль южной и западной — одноэтажные подсобные помещения; на втором этаже башни над воротами появилась часовня (каплица) св. Христофора, на третьем — часы. В самом же дворце на первом этаже хранились запасы продовольствия, хозяйской утвари и оружия, второй занимала администрация Мирского графства, третий был отведен для размещения личных покоев магнатов.
Несмотря на множество жестоких войн, проходивших на территории белорусских земель, замок неоднократно, словно птица Феникс, восставал из руин, обретя в итоге парадный и танцевальный залы, уникальную портретную галерею. А в местной оранжерее, оформленной на итальянский манер, плодоносили цитрусовые, росли мирт, кипарис, лавр, красное дерево и другие экзотические виды флоры.
Одним из самых знаменитых обитателей здешних мест был Николай Христофор Радзивил (1549–1616), получивший прозвище «Сиротка» с лёгкой руки короля Жигимонта II Августа, сочувственно назвавшего так маленького плачущего и забытого всеми во время одного из празднеств княжича. С юных лет Николай «Сиротка» много путешествовал по миру. Он побывал на Крите, на Кипре, посетил древние руины Баальбека, древний Дамаск, был на Мертвом море. Из дальних странствий магнат привез богатую археологическую коллекцию, в том числе древние мумии, которых самоотверженно спасал во время сильнейшего шторма. Им также были привезены экзотические животные, и среди них так называемые «фараоновы крысы» — мангусты, которые даже успели прижиться и расплодиться в белорусских лесах. Благодаря «Сиротке» после очередной перестройки в облике Мирского замка стали явственно прослеживаться черты итальянского барокко.
Еще одним легендарным Радзивиллом, которого нельзя не упомянуть и жизнь коего была тесно связана с Мирским замком, был Кароль Станислав (1734–1790) по прозвищу «Пане Коханку». По сравнению с жизнеописаниями этого колоритного чудака небылицы барона Мюнхгаузена кажутся детским лепетом. И чего только он якобы не совершал: спасался от пиратов в ореховой скорлупе, катался летом по соляной дороге на возе, запряженном медведями, охотился на чёрта в Налибокской пуще, выезжал на Рыночную площадь на бочке с вином в костюме Бахуса, чтобы напоить всех желающих, и, конечно же, славился своими многочисленными романтическими похождениями, а однажды даже обзавелся возлюбленной из числа… русалок!