В 1862 году новобрачные приобрели в Бретани небольшой старинный замок на берегу Атлантического океана. И княгиня Юсупова, как большая любительница архитектуры, энергично взялась за его обустройство.