С 1860-х годов дом еще несколько раз менял владельцев. С 1890-х годов до 1917 года дом использовался как доходный и принадлежал камер-юнкеру Зенону Ивановичу Семашко и его наследникам. В это же время, в 1890-х годах, здесь поселилась художница Надежда Савельевна Войтинская (1886–1965), создававшая литографические портреты для журнала «Аполлон». В ее мастерской в этом особняке на Фонтанке бывали самые известные творческие личности Серебряного века: Александр Блок, Максимилиан Волошин, Николай Гумилев, Зинаида Гиппиус, Корней Чуковский, Александр Бенуа и Мстислав Добужинский.
После революции этот дом, как и многие особняки на Фонтанке в Санкт-Петербурге, сменил статус доходного на дом с коммунальными квартирами. Во время Великой Отечественной войны этот район сильно бомбили, но особняк уцелел.
Тяжело дались особняку 90-е годы ХХ века. В 1994 году дом признали подлежащим реконструкции. А в 2010-х годах ситуация усугубилась, так как по зданию пошли трещины. В 2014 году дом был полностью расселен и закрыт, постепенно приходя в упадок. Это типичная судьба для многих особняков Петербурга того времени.