Остров получил свое название от фамилии одного из его владельцев, директора придворного театра, обергофмейстера Ивана Перфильевича Елагина.
При нем здесь началось каменное строительство, возведены павильоны для защиты от наводнений, выкопаны пруды и каналы.
Также владельцами Елагина дворца в разное время были: граф Орлов, племянник знаменитого фаворита Екатерины II, император Александр I.
Елагиным дворцом начинается эпоха больших ансамблей Карла Росси, когда он будет преобразовывать центр Санкт-Петербурга и станет первым архитектором страны
