В 1791 по проекту архитектора Рослякова был построен двухэтажный каменный дом и двухэтажный деревянный дом (усадьба Колошиных). Вскоре оба дома сгорели. Деревянный восстановить не удалось, а каменный в 1825 отремонтировали по проекту архитектора И.Д. Дюссар де Невиля. На воротах появились 2 льва, поэтому дом стали называть "Дом со львами". Через 53 года на аукционе дом купил купец Прозоров, известный благотворитель. Этот дом он подарил в 1878 уездному городскому училищу. Самым известным выпускником училища стал писатель Александр Грин. После обучения в 1896 Александр Грин уехал в Одессу. Это училище было единственным учебным заведением, которое Грин в своей жизни окончил.
После революции все здания усадьбы были переданы отделу народного образования. Сегодня в бывшем здании училища находится музей народного образования.