金大定十九年（1179），在今北海所在地大兴土木，建造了许多精美的离宫别苑，先名大宁宫，后更名为万宁宫。据《金史·地理志》记载：“京城北离宫有大宁宫……明昌二年更为万宁宫。琼林苑有横翠殿。宁德宫西园有瑶光台，又有琼华岛，又有瑶光楼。”可见建筑规模相当宏大。当时园林的布局情况大体是以琼华岛为中心，在岛上和海子周围修造宫苑。其位置相当于今天北海和团城部分。