Дом купца Ушкова, вторая половина XIX века