В 1844 году дом приобрел крестьянин Николай Мокеевич Брусницын, приехавший из Тверской губернии. В 1847 году он создал кожевенную мастерскую, которая поначалу была небольшой (работало в ней всего 10 человек) и занималась дублением кожи. Вскоре у неграмотного, но предприимчивого крестьянина дела пошли на лад: он стал купцом, у него образовалась большая многодетная семья, а мастерская расширилась, превратившись в большую фабрику с 600 рабочими. В 1857 году по проекту архитектора А. С. Андреева с западной стороны к зданию пристроили объём в три оси. В 1860-х годах им же были увеличены окна первого этажа и высота второго этажа, изменён лицевой фасад.

В 1882 году особняк перешел к сыновьям Николая Мокеевича Брусницына: Николаю, Александру и Георгию. Приблизительно в 1900 году трое братьев решили перестроить родительский дом, но стройка прервалась в виду банкротства из-за пожара на фабрике -  та сгорела дотла. Многие говорили о поджоге и о бездействии пожарных бригад. Так он простоял около четырех месяцев, пока его не приобрел господин Татев. Перестройка была поручена архитектору Анатолию Ивановичу Ковшарову. Дом получил новую отделку интерьеров. Второй этаж вновь был повышен. С восточной стороны для парадной лестницы к зданию добавлена пристройка в одну ось. Со стороны двора был организован зимний сад. Лицевой фасад был надстроен под один карниз. Именно при этой перестройке здание получило существующий сейчас облик и особняк приобрел форму буквы "Ш".