Дом неоднократно перестраивался. Правая его
часть ампирный особняк, построенный в 1820 г. для Н.И. Воейкова. В 1908 г.
дом покупает Маргарита Кирилловна Морозова и перестраивает его по проекту
архитектора И.В. Жолтовского. М.К. Морозова прожила в особняке до 1918 г.