Дубовые двери главного дома уцелели, а позолота с них сошла. Уцелели и лепные карнизы с модульонами — небольшими кронштейнами под карнизом. Остальное убранство исчезло. Дом на Старо-Рогачёвской, 34, помнит купцов, богадельню и автошколу.
Усадьба сложилась в 1770–1780-е годы и принадлежала крупным хлеботорговцам Толчёновым. Иван Алексеевич Толчёнов, купец первой гильдии и городской голова, вернулся из Петербурга и обустроился на Клинской улице — нынешней Старо-Рогачёвской. Он поставил в городе один из первых каменных двухэтажных жилых домов, а рядом — службы: людские, конюшню, скотный двор, амбары. Для деревянного города два каменных этажа были заявкой. В глубине участка был регулярный сад с прудом, теплицами, оранжереями и беседкой, от улицы усадьбу отделял каменный забор с воротами.
Главный дом выстроили в 1785–1788 годах: кирпичный, оштукатуренный, два этажа с антресолями, белокаменный и лепной декор. Формы с чертами французского классицизма близки столичным образцам, и исследователи не исключают, что проект принадлежал Н. П. Осипову, с которым заказчик вёл дела. Фасад держится на ионических пилястрах, сандриках над окнами и лепных гирляндах.
Флигель старше дома: он появился в 1774 году как кладовая, одноэтажный, с полуподвалом, в грубоватых формах позднего барокко. В 1788 году его верхние помещения перестроили, связали с домом, перекрыли сводами, добавили лепной плафон. Окна забраны коваными крестчатыми решётками, кладовые нижнего этажа перекрыты коробовыми сводами. Верхние парадные комнаты шли анфиладой: стенопись, плафоны, кафельные печи с кобальтовым рисунком, стены, обтянутые бумажной и шёлковой материей.
В 1796 году усадьбу за 15 тысяч рублей купил купец первой гильдии Иван Артемьевич Тугаринов — городской голова, бургомистр и владелец суконной фабрики. Имя нового хозяина закрепилось в обиходе: «Тугаринов дом». В 1816–1825 годах рядом вырос ещё один каменный дом, известный как богадельня Тугаринова. В 1840-х годах усадьба принадлежала М. А. Архангельской, потом пришла в упадок: службы исчезли, сад опустел.
В 1920-х годах дом и флигель объединили в один корпус, а в 1968–1974 годах реставрация под руководством Л. А. Беловой вернула зданиям прежние объёмы и внешние формы. От сада остались пруд и несколько старых деревьев; регулярной планировки больше не разглядеть. Классицизм в Дмитрове сохранился почти только в Заречье: считается, что это единственный в городе усадебный комплекс такой эпохи. Теперь в доме автошкола, и парадный фасад уживается с разметкой учебной площадки в одном дворе.