В 1802 году через Министерство внутренних дел Ковылину удалось приобрести идущий на слом храм Сретения в Кремле (XVI век) вместе со всеми старинными иконами и убранством. В 1806 году, когда началась перестройка Потешного дворца царя Алексея Михайловича в Кремле, Ковылин купил парадные резные ворота дворца, украшенные белокаменными изображениями львов. Эти ворота были перевезены на Преображенку и установлены при входе в женскую обитель. После революции 1917 года ворота были разобраны и перевезены в Коломенское.