Здание построено в конце XVIII в., часто меняло хозяев и подвергалось позднейшим переделкам. В кон. 19 в., при владельце И. Е. Ваганове (возможно, одновременно с возведением в 1892 г. надворного флигеля), был заново декорирован главный южный фасад, с востока сделана равновысокая пристройка, а северо-западный угол скруглен встройкой. Стены сложены из кирпича, оштукатурены и покрашены, цоколь белокаменный. Двухэтажное здание (в плане – неправильный четырехугольник со скругленным северо-западным углом) завершено вальмовой кровлей. Обильный эклектичный декор главного фасада, где центр первоначального объема выделен ризалитом в три оси, ориентируется на ренессансно-барочные формы. Руст, покрывающий стены первого этажа, обработан «под шубу», над прямоугольными окнами в узких рамочных наличниках помещены замковые камни с гротескными бородатыми масками. В ризалите балкон с чугунной решеткой фасонного литья поддерживают четыре атланта в львиных шкурах. Углы здания и ризалита во втором этаже фиксированы каннелированными пилястрами коринфского ордера. Над ризалитом – лучковый фронтон, в тимпане которого помещен рыцарский герб со щитом и орнамент из аканта. Интерьер после перестройки кон. 19 в. представляет группу помещений по периметру здания. Они объединены продольным коридором в центре, связанным с лестничной клеткой, куда ведет вход с дворового фасада. Другая лестница расположена в пристройке. Известно, что в начале XX в. дом еще принадлежал тверскому семейству Вагановых. В настоящее время утрачены чугунное крыльцо парадного входа и эркер над ним (в боковой пристройке), парапет над венчающим карнизом с решеткой и вазонами, а также ворота с рустованными пилонами и вазонами. В нынешнем виде здание – один из наиболее выразительных примеров архитектуры эклектики в Твери, но не менее ценен боковой фасад, сохранивший прежнюю композицию и декоративное убранство в стиле раннего классицизма.
Красавец-дом! Кто был его архитектором и первым владельцем в конце XVIII века неизвестно, а вот из последних - купец Иван Ваганов, известный своей благотворительностью и даже побывавший семь месяцев тверским городской головой в 1903 году. Его семья владела особняком в конце XIX - начале XX в. При Ваганове здание и обрело тот вид, каким мы видим его сегодня ( за исключением некоторых утраченных деталей). А потом, в 20-х, в здании разместилось ОГПУ. Огромную коллекцию книг в 25 тысяч томов, что собрал Ваганов, передали городу, в библиотеку.