Дом, где работает музей архитектуры, сам может быть экспонатом. Его построил Матвей Казаков в 1787 году для генерал-поручика П.Ф. Талызина на месте Аптекарского двора Милославского и подворья Печерского Псковского монастыря. Известно, что в разное время этими землями владели царевич Грузии Вахтанг, И. Писемский, И. Милославский, В. Долгорукий.
Архитектор этого дома был настолько дерзок, что поставил здание тыльной стороной к Кремлю: главный вход в дом Пашкова располагается вовсе не на Моховой, а в Староваганьковском переулке.
Этот дом принадлежал одному из «екатерининских орлов» — графу Владимиру Григорьевичу Орлову. Он был младшим братом екатерининского фаворита и активного участника переворота, благодаря которому Екатерина II взошла на престол.
Этот дом повидал многое. Был здесь литературно-музыкальный салон Зинаиды Волконской, куда хаживал сам Пушкин. Работал здесь легендарный «Елисеевский». И в этом же доме прикованный к постели Островский писал «Как закалялась сталь».
Дом 13 по Тверской улице построили для московских генерал-губернаторов. Позже в нем размещался Моссовет. А сейчас здесь мэрия Москвы.
В XIX веке здесь размещалось Благородное собрание. Попасть сюда могли только избранные. В Советское время изменилось только название, а двери Дома Союзов были открыты не для всех.
Сначала в этой усадьбе размещался Английский клуб. Стендаль считал, что даже в Париже не было клуба лучше. Но ему на смену пришла больница.
Дом Губина — один из лучших образцов московского классицизма. Матвей Казаков построил его для богача-археолога. А сегодня здесь правит бал современное искусство.
В этом доме размещался книжный магазин издательства «Посредник» И.Д. Сытина и партийно-кооперативное издательство «Московский рабочий». Его пайщиком был сам В.И. Ленин! Сюда осенью 1927 года М.А. Шолохов принес рукопись романа «Тихий Дон».
Малый Златоустинский переулок получил имя по Златоустинскому монастырю. О нем напоминают только двухэтажные корпуса бывших келий в доме 5 строение 1. А вот дом Матвея Казакова сохранился.