В начале 18 века на берегу Невы располагалась деревня Глезнево. Позже в деревню стели переселяться рыбаки и, после основания Санкт-Петербурга получила название Малой рыбачьей слободы. В конце 18 века здесь же расположилось имение князя Гавриила Петровича Гагарина.
После смерти князя имение перешло А.И. Чернову. Именно по его желанию имение было перестроено. Для этой цели был нанят А.И.фон Гоген. По его плану на месте старого деревянного дома расположился новое здание.
После революции и последующей иммиграции Чернова в усадьбе располагались поликлиника, больница, дом отдыха. Во время войны здесь располагался важный узел связи. А позже здание засекретили – здесь работал аппаратура подавления сигналов западных радиостанций.