峰岩紧邻天柱峰之北，隔溪与隐屏峰相对。宋朝以来，历代多有理学家在此隐居，为儒士荟萃之地。先是南宋名臣、理学家刘珙在峰麓构建仰高堂，寓“追思孔圣，仰之弥高”之意。岩壁有朱熹题刻《九曲棹歌·五曲》和明人镌刻的“高山仰止”。刘珙学友朱熹继之在对岸隐屏峰下构建武夷精舍，会友传道，授徒讲学，并筑晚对亭，追思隔岸之刘珙，并写有《仰高堂追怀刘共甫》诗：“面势来空翠，哦诗独好仁。怀人今已矣，谁遣栋梁新。”宋末元初，朱熹再传弟子、理学家熊禾又隐于峰麓，建洪源书堂，深寓饮水思源、追念先贤之意；并在此与南宋遗臣谢枋得等论文明节。洪源书堂设有追源堂、传衷堂、朱文公师生祠、熊氏忠孝节义祠。明末，龙溪游镳结庐于此，称半石居，殁即葬于庐侧，今俱废。清乾隆年间，武状元马负书之子为弘扬武夷山理学渊薮，谨遵父嘱，在岩壁镌刻其父遗墨“道南理窟”四个大字。此外，还有明代隐者陈省题写的“五曲”“幼溪津”摩崖石刻以及后人摹写的朱熹《九曲棹歌·五曲》等岩刻。