Дом в Малом Толмачевском переулке сформировался в результате нескольких строительных этапов. Первое жилое здание на этом месте появилось в середине XVIII столетия как главный дом городской усадьбы, стоящий в глубине двора. В 1806 году при дворянах Соловьевых особняк был переделан с учетом новых тенденций и стилевых особенностей классицизма. Здание получило правильную прямоугольную форму, близкую к квадрату, и было надстроено крестообразным мезонином, который повысил градостроительную роль дома и придал ему пирамидальность, свойственную постройкам начала XIX века. Вдоль западного фасада расположились парадные помещения, а вдоль восточного были устроены антресоли. После пожара 1812 года владельцем усадьбы стал купец первой гильдии, почетный гражданин Москвы Алексей Семенович Медынцев. Его сын Алексей Алексеевич Медынцев был близким другом Павла Михайловича Третьякова, жившего по соседству в Лаврушинском переулке. 

В 1860-х годах к главному дому со стороны Малого Толмачевского переулка сделали двухэтажную пристройку, в которой разместились две квартиры для сдачи в аренду. Отделка фасада пристройки была выполнена в духе эклектики. Между старым и новым объемами разместили лестницу. Помимо главного дома на территории владения находились каменные и деревянные хозяйственные постройки. После Медынцевых усадьба перешла купцу Михаилу Алексеевичу Ремизову, у которого в 1877 году здесь родился сын – будущий писатель Алексей Михайлович Ремизов. В Толмачах он провел лишь первые годы своей жизни. За несколько лет до смерти, уже в эмиграции, Ремизов написал автобиографическую повесть «Подстриженными глазами», в которой описал свою малую родину. В начале XX столетия при московском купце Я.Н. Крейнесе, который наладил в Малом Толмачевском переулке производство, максимально увеличилась плотность застройки усадьбы. В главном доме были прорублены новые окна с дворовой стороны, что несколько нарушило композицию классицистического фасада. 

Сегодня бывший дом Медынцева-Ремизова является выявленным объектом культурного наследия. В наши дни здание было отреставрировано. Оно играет важную роль в застройке этой части Замоскворечья и держит фронт Малого Толмачевского переулка. Древнее ядро дома (западная часть) представляет собой образец архитектуры классического стиля. Оно частично сохранило композицию и декоративные элементы классицизма. Объем, выходящий на красную линию переулка, имеет обильную, броскую декорацию, характерную для периода эклектики: фигурные аттики, венчающие парадный и боковой фасады, пилястры, украшающие углы здания, сложные межэтажные карнизы, изящные ниши окон первого этажа и многие другие детали внешнего убранства. Но главная ценность этого дома – мемориальная, и связана она с именем родившегося здесь Алексея Михайловича Ремизова, писателя с неповторимым стилем.