Купеческий особняк с мезонином построен в Калашном переулке в 1884 г. архитектором А.С. Каминским, зятем братьев Третьяковых, для купчихи А.И. Сергеевой. Архитектор перестроил дом из стоявшего тут с 1820-х гг. ампирного купеческоого особняка с колонным портиком и мезонином. При капитальной перестройке Александр Степанович сохранил композицию особняка — одноэтажный с мезонином на полуподвале, придав ему современный декор и пропорции. Украсил фасад декором по древнегреческим мотивам. Центральная часть особняка возвышается над боковыми ризалитами благодаря треугольному фронтону мезонина. Он увенчан по бокам и центру акротериями — скульптурами — в виде статуй (пальметт). Центральный фронтон мезонина покоится на ампирном лепном основании. Они, подобно верхнему фронтону, в центре и углах украшены акротериями. Центральная композиция усилена большой входной дверью с металлическим козырьком, опирающимся на ажурный декор.

В 1892–1893 г. этот дом снимал знаменитый музыкальный педагог Московской консерватории Н.С. Зверев, воспитатель многих выдающихся пианистов и композиторов — А.И. Зилоти, С.В. Рахманинова, К.Н. Игумнова, А.Н. Скрябина. Дети жили у него в доме на пансионе, много занимались, их в шутку называли «зверятами».

В 1898 г. особняк приобрел Н.Н. Коншин, владелец Серпуховской мануфактуры, одной из крупнейших хлопчатобумажных фабрик в России. Дом принадлежал ему до переворота 1917 г.

В 1920-х гг. в доме находился детский сад «Светлый путь». После войны в доме располагалось посольство Японии, сейчас это резиденция посла Японии. В 2011–2012 г. особняк отреставрировали. В доме сохранилась лепнина потолков.