А в 1802 году территория стала частью городской усадьбы гвардии прапорщика Александра Арцыбашева. После пожара 1812 года имение восстановили: на месте уничтоженных деревянных строений возвели каменный одноэтажный дом с деревянным мезонином, два деревянных флигеля, погреб и каретный сарай. В течение XIX века участок несколько раз менял владельцев, пока в 1892 году не перешел к нотариусу Андрею Полю. При нем по центральной части двора проложили переулок, — и территория разделилась на два участка.
В 1904 году западную часть купил золотопромышленник Иван Игнатьевич Некрасов.
Особенностью дома стал лифт для подачи кушаний из кухни в полуподвальном этаже в парадную столовую на первом этаже.
А после революции 1917 года усадьбу Некрасова национализировали. В здании разместилась показательная детская колония имени А.В. Луначарского. Затем особняк передали под нужды дипломатического корпуса. В разные годы здесь располагались посольство Республики Таджикистан и резиденция посла Королевства Испания. С 2015 года здание занимает посольство Республики Чили.
...Михаил Булгаков, описывая дом Маргариты в романе «Мастер и Маргарита», соединил особняк Некрасова и соседний дом архитектора Сергея Соловьева.