后在其旁筑寺，明洪武十五年(1382)定名喔“月波寺”。万历年间(1573-1620)，相拉薬余有丁用月波寺废址构筑庄园一所，面湖枕山，大可百亩，明神宗曾御书“名山洞府”四字以赠。余晚年就在此读书自误，因感《归去来辞》之意，名之为“五柳庄”。内有“日涉园”，“归来堂”，“觉是斋”、“晨曦亭”、“矫首台”，总称“舒园”。林园之胜，极一时之盛。后人称之为“余相书楼”。后毁于兵火，寺亦无存，而胜地声名依旧。有诗人咏叹道：

五柳庄开僻地幽，高低亭榭接书楼；

而今零落埋荒草，剩有波声带月流。