По сведениям местных жителей, одним из последних владельцев дома (до революции 1917 г.) был купец Милохин.
В начале XIX в. дом был надстроен на один этаж, а во второй половине этого же века расширен с северной стороны за счет обширной двухэтажной пристройки. Сильно переделана внутренняя планировка обоих этажей. В XX в. при приспособлении здания под столовую, разобраны внутренние капитальные стены южной половины дома. С устройством новых входных проемов и закладкой некоторых старых усилилась изолированность отдельных помещений и изменилась их первоначальная система сообщения между собой. Архитектурная декорация сохранилась лишь на верхней части здания. В нижнем этаже срублены наличники окон на главном фасаде. Кроме того, одно из окон заложено, а второе растесано и превращено во входной проем.
Главным образом дом выходит на Базарную площадь, образуя с несколькими другими зданиями площади целый комплекс жилой застройки кон. XVIII в.
Здание соединено с соседними домами лестничной клеткой и выездными воротами. Его объем после надстройки стен несколько возвышается над остальными зданиями площади. Со стороны двора примыкает обширная пристройка, придающая первоначально прямоугольному плану зданию неправильную «г»-образную форму.
В ХХ веке сильно переделана внутренняя планировка здания. В основе планировки каждого этажа лежит его разделение капитальной продольной стеной на две части. Северная часть во всех этажах сохранила свое первоначальное расчленение поперечными капитальными стенами на четыре помещения. В южной части первого этажа полностью разобраны внутренние капитальные стены, а во втором этаже они заменены тонкими перегородками. Из-за многочисленных закладок проемов и устройства дополнительных входов сильно искажена первоначальная система сообщения помещений между собой. В северной половине первого этажа сохранились коробовые своды распалубками. Такая же архаическая система перекрытия уцелела также в одной из комнат второго этажа.
Здание выстроено по «типовому» проекту. Такой упрощенный вариант архитектурной декорации очень характерен для жилой застройки г. Торопца кон. XVIII в., когда барочные формы уступают место более простой и строгой декорации в духе классицизма.