承応３(１６５４)年に甲府宰相・松平綱重によって甲府浜屋敷としてつくられ、綱重の子・綱豊が６代将軍・徳川家宣になったのを機に、浜御殿と呼ばれる将軍家別邸となりました。以来、歴代将軍によって改修が行われ、１１代将軍・家斉の時にほぼ現在の姿の庭園が完成。明治維新後は宮内庁所管の浜離宮となりました。
昭和２０年に東京都に下賜され、翌年浜離宮恩賜庭園の名称で開園し、昭和２７年に国の特別名勝及び特別史跡に指定され現在に至ります。