Замок Кариоле - известен тем, что его купила Зинаида Нарышкина-Юсупова, для своего мужа. Дама эта была очень состоятельной, что позволило ей значительно изменить внешний и внутренний вид замка. Его называют «маленьким русским безумием в Бретани». Такое прозвище он получил от гремучей смеси стилей, которые привнесла в его облик богатая хозяйка. Дело в том, что работы по обустройству замка под ее руководством велись 20 лет. За это время Юсупова успела поменять свои архитектурные предпочтения несколько раз.
Зинаида Ивановна Нарышкина принадлежала к старинному русскому роду. После смерти мужа – князя Бориса Юсупова красивая и богатая вдова в 1855 году переехала во Францию. На одном из великосветских балов Зинаида познакомилась с блестящим офицером имперской гвардии Шарлем Шово и, несмотря на значительную разницу в возрасте (ей - 57, ему -32), решила выйти за него замуж..
Для брака с вдовой князя Шарлю однако нужно было иметь дворянский титул, и Зинаида купила предмету своей страсти сразу два – графа Шово и маркиза де Серр. В сентябре 1860 года в России, в часовне юсуповского дворца прошла церемония бракосочетания, а в 1862 году новобрачные приобрели в Бретани небольшой замок, окруженный густыми тенистыми аллеями. Княгиня была уже не молода, а, кроме того, привыкла жить в комфорте и роскоши. Современники называли ослепительно красивую, образованную и склонную к изящным искусствам княгиню Юсупову «украшением салонов» и «звездой первой величины». Она входила в пушкинское окружение, а ее поклонниками были российский император Николай I и французский Наполеон III. Кроме того, после смерти мужа в 1849 году пленительная Зинаида оказалась владелицей несметного состояния, в том числе дворцов в Москве и Архангельском, в Санкт-Петербурге и Кореизе.
Граф де Шово вскоре умер, завещав замок своей любовнице. Графиня в бешенстве выкупила у соперницы замок втридорога и подарила его тамошнему департаменту при условии, что замок будет музеем.
Но замок перешел по наследству внуку княгини Феликсу Юсупову, который наделал долгов, распродал всё ценное, что было в замке и бросил его. Долго замок стоял бесхозным, его разграбили и он медленно разрушался. Пронёсшийся над Бретанью ураган превратил замок в руины.
Но, будто в волшебной сказке, всего через несколько дней после катастрофы в Кериоле вдруг приехал некий француз, который где-то слышал о замке, выстроенном в Бретани русской княгиней. Необычное сооружение произвело на него столь сильное впечатление, что проезжий, который не пожелал, чтобы его имя стало достоянием гласности, купил имение, чтобы вернуть ему прежний блеск.
Сейчас в замке полным ходом идут реставрационные работы и каждый год открывается по новой комнате для посетителей. Хозяин принял решение восстановить замок таким, каким он был при княгине Юсуповой.