Изначально дом был построен в 1761 году Как трёхэтажный особняк для генерала от артиллерии Александра Никитича Вильбоа архитектором Ф. Б. Расстрелли. Позже особняк перешёл генерал – фельдмаршалу Князю Александру Михайловичу Голицыну. Поскольку сам Голицын пользовался вниманием Екатерина второй, то она часто гостила здесь. После смерти Голицына дом стали сдавать в наем его наследники. Так французский эмигрант Иосиф Леон начал устраивать особняке платные маскарады и увеселительные мероприятия. Затем помещение начали сдаваться филармоническому обществу и в нём начали проходить концерты. В 1830 году по проекту П. П. Жако был надстроен четвёртый этаж. И в нём поселились дочь издателя Сленина, чья дочь Ольга Михайловна вышла замуж за оборона – миллионера Василия Васильевича Энгельгардта. И музыкальный вечера, также баллы – маскарады продолжились уже при новых хозяевах. Особняк энгельгардта вошёл в историю русской литературы. События драмы М. Ю. Лермонтова “маскарад “происходит именно здесь.