Первоначально оно было построено князем в виде небольшого домика, но после присоединения Крыма, по приказанию императрицы, архитектор Старов на месте прежнего дома построил роскошный дворец, наподобие Пантеона.
Рейнсдорп собрал опять совет из военных и гражданских своих чиновников и требовал от них письменного мнения: выступить ли еще противу злодея, или под защитой городских укреплений ожидать прибытия новых войск? На сем совете действительный статский советник Старов-Милюков один объявил мнение, достойное военного человека: идти противу бунтовщиков. Прочие боялись новою неудачею привести жителей в опасное уныние и только думали защищаться. С последним мнением согласился и Рейнсдорп.