Усадьба Г.И. Елизарьева, 1850-1880 года