Дом с атлантами построили в 1882 году по проекту архитектора Василия Карнеева для знаменитого чаеторговца Алексея Расторгуева. Первый этаж предназначался для магазина домовладельца, а два верхних уровня занимали квартиры.

Главный уличный фасад имеет характерную для эклектики конца XIX века протяженную симметричную горизонтальную композицию. Здание представляет историко-культурную ценность как образец экспериментального для своего времени доходного элитного малоквартирного дома, у которого было самое современное техническое оснащение. Сложившийся в 1882 году доходный комплекс существенным перестройкам не подвергался. В 1909 году он был продан миллионеру-сахарозаводчику П.И.Харитоненко.

После революции дом национализировали. Часть здания заняли лаборатории Научно-исследовательского института рентгенологии и радиологии. А бывшие доходные квартиры переоборудовали под коммунальные. В этом доме жили известные ученые — физик-рентгенолог Петр Лазарев и химик Сергей Наметкин.

У этого дома непростая судьба. Бывший владелец безответственно к нему относился. Затем здание было передано другому собственнику, который признал объект непрофильным. Аукцион, в ходе которого был определен нынешний владелец памятника, состоялся в мае 2018 г.

В октябре 2022 года была завершена реставрация фасада.