江戸時代市中では徳川家唯一の別邸として作られ、６代将軍家宣の時代には「浜御殿」と呼ばれていました。
２５万平方メートルの敷地があり、潮入りの池は徳川家の鷹狩場として海を埋め立てられているため、海水になっています。
昭和２７年（１９５２）に国の特別名勝及び特別史跡に指定されました。
８代将軍吉宗の時代、浜離宮で２１年間象が飼われていました。吉宗がベトナムより取り寄せた象は、長崎より約１年かけて江戸に到着し、享保１４年（１７２９）～寛保元年（１７４１）まで飼育され、その後民間に払い下げとなり中野村（現在の中野）で飼育されていたそうです。

※掲載している情報は、放送時点のものです。