С середины XIX века квартал меняется. На Солдатской улице селятся чиновники и мещане, которые строят каменные двухэтажные дома и усадьбы.
Одной из первых каменных построек стала усадьба чиновника Шумкова, которую начали строить в 1840-х годах
Владела двухэтажным домом со службами и баней его вдова Александр Никитишна. Со временем усадьбу продали и в ней расположилось агентство петербургской компании «Надежда». В конце XIX века усадьба перешла в собственность А. П. Пименов. А после революции её национализировали и превратили в обычную советскую коммуналку.
В 60-х годах прошлого века вокруг исторической застройки начали возводить современные дома — сначала пятиэтажные, а после и высотные.
От всех каменных зданий Солдатской улицы сохранились только главный дом усадьбы Шумкова с оградой и воротами
В апреле 2013 года здание сильно пострадало от пожара, когда загорелись внутренние перегородки. Памятник архитектуры оказался в аварийном состоянии. Поэтому в 2014 году его выкупила компания «Атомстройкомплекс», которая провела полную реставрацию и восстановила усадьбу.