Двухэтажный особняк в стиле барокко построен во второй половине 1750-х годов по заказу графа Карла Сиверса. В 1779—1781 годах имением владел князь Григорий Потёмкин, у которого его выкупила императрица Екатерина II. Ансамбль в стиле классицизм был создан в 1780-е гг. предположительно уже для вице-канцлера Ивана Остермана.
В комплексе зданий, перестроенных по проекту Доменико Квадри и Петра Павлова, с 1828 года располагалась городская психиатрическая больница в честь иконы Богородицы «Всех Скорбящих Радость» с домовым храмом, а с 1922 года — больница имени Фореля.
Во время Великой Отечественной войны здания сильно пострадали от обстрелов и было частично разрушены. После войны дачу Сиверса передали Кировскому заводу, и в них был устроен Кировский городок. В 1950-х годах ансамбль был капитально перестроен в духе сталинского неоклассицизма. Там размещалось заводское общежитие.
Дача Сиверса внесена в реестр памятников культуры регионального значения.