古代越人的一个分支于越，秦汉时因战乱入桂。唐朝元晦任桂管观察使时，独爱于越山，在山隈筑“写真堂”，朝夕读书绘画其间，写《于越山记》，山以文传。山顶有于越亭，亦名越亭，元晦始建，早废，现亭为重建。山麓有“康岩”、“素洞”，洞北向，高3.2米，宽1.7米，长10.5米，面积约18平方米。清光绪二十年(1894年)12月，康有为到桂林讲学期间，住在叠彩山风洞前景风阁，发现于越山下的两个岩洞，以自己的字号命名，东叫“康岩”，北叫“素洞”，并摩崖篆名题刻。