Усадьба купцов Лихачевых, вторая половина XIX века