Комплекс зданий в Бобровом переулке появился в разные годы при разных владельцах. Первоначально усадьба принадлежала Скворцову.
В 1875-1886 годах две комнаты бельэтажа здания занимала редакция газеты «Русские ведомости», а в 1890-х владение перешло купцу Иллариону Ускову.
Строение 2 поставили на месте западного флигеля по заказу А.Э. Вихерта. Он стал владельцем усадьбы после смерти Н.С. Скворцова.
Хозяйственное строение 3 появилось в 1875 году. В 1909 и 1996 его перестраивали. А в 1879 году по заказу Ускова В.А. Гамбурцев построил доходный дом (строение 4).
Теперь все здания занимают офисы.