后乐园位于小石川台地的南端(现在的文京区后乐1丁目)，从神田上水分出一条支流引入庭园内形成了以池水为中心的回游式假山泉水庭园，在约7万平方米的宽广的庭园内，种植了梅花、樱花、杜鹃等3000多株植物，在四季呈现出不同情趣的景色。

由于德川光圀的友人朱舜水的参与，庭园的设计里融入了很多儒家思想的元素，和明朗开放的六义园形成鲜明的对比。后乐园除了将各地著名的湖、山、河流、田园景观巧妙的模拟体现外，还有随处可见以中国的名胜命名的景观，如西湖、庐山等，因此被称为“洋溢着中国趣味的深山幽谷”。

此后的后乐园长期作为水户藩主的私人庭园，直至1869年(明治2年)，最后一任水户藩主徳川昭武在版籍奉还时同时将住宅和庭园寄赠给新政府。陆军省管辖这片土地时，将在原先住宅的地块上建设了东京炮兵工厂(后来改建为后乐园球场，即现在东京巨蛋的所在地)，但是没有破坏后乐园，将庭园风貌保存了下来，作为明治天皇外出(行幸)的休息地点。