汉元封二年（前109）始建的陵阳县城（石埭县的前身）便位于陵阳山南脚下，县名亦以山而冠名。又因汉朝陵阳县令窦子明，曾炼丹于此，故陵阳山因此而得名。据邑志记载，东一峰，俗称天寿山，传说故邑人多寿。其中峰之巅有明朝毕尚书墓，松柏葱蔚。在中峰半山有石如台，即丹台，高有二百余丈。之后的唐朝天宝中期，又在此建有仙坛宫（今废），宫后有石散布若斗宿，名七星石，在临石崖处泉水涓涓流出，色微红，又称丹井。从中峰至西，只见有石如观音，远望像大士菩萨立于陡崖之上。