在杜甫离开同谷成都之旧云。”（晁说之《成州同谷县杜工部祠堂记》）

可见，在此之前，其地只存故居，尚未有祠堂也。祠堂建成后，战乱频仍，年久失修，濒于倾圮。直到明万历时十六年（公元1018年），成县教谕管应律方始奉命修复。

清光绪十一年（公元1885年），甘肃学政陆渔笙、阶州知州知州叶恩沛，成县知县李焌等人发起并支持进行修葺，他们并以此为题迭相唱和，传为佳话。 中华民国三十一年（公元1942年），成县县长陶自强又对祠堂进行修复，墙垣户铺焕燃一新，并一度恢复了春秋二季的祭祀。

直到八十年代，才由县政府组织有关部门进行了较大规模的修葺，制作树立了杜甫的汉白玉雕像，接着又开通了从县城通往祠堂的公路。

二十一世纪伊始，县政府顺应全国经济文化等各项社会事业蓬勃发展的有利形势，大力发展文化旅游事业，组织有关部门和社会人士制订了大规模扩建杜公祠的方案，并多方积极筹措资金，扩大征地，鸠工庇材，全面动工。经过三、四年的紧张施工，前后修成前门，牌坊，大殿，碑廊，亭阁台榭，桥梁，水池，甬道，刻制并镶嵌碑石近100块，并在庭院前后遍植品种多样的梅花，竹子及花木瑞草，使得有一千多年历史的祠宇规模扩大，建筑瑰丽，气度恢弘，内涵丰富，一个既悠久又崭新的杜少陵祠从此展现人们眼前。

杜少陵祠所在的飞龙峡，据《水经注》记载，古称凤溪水，是青泥河流入嘉陵江的必经之地。曾被杜甫清溪从高处沿石级飞流而下。祠堂院内大殿前，翠柏劲健，鲜花盛开，清阴幽韵，令人神往。

从祠堂门前大道沿青泥河南行，崇山峻岭，奇峰怪石，水声澎湃，树影差参，风光绮丽，若继续前行，则需攀岩越岭，涉溪过涧，约十余里便可达陕西省略阳县境。这是一条崎岖难行却逸趣横生的路，可以让人们欣赏到成县南部山区美丽的风景。

在距万丈潭不远的大道边，山崖畔，是2011年兴建起的龙峡山庄，一个集餐饮，住宿，休闲于一体的所在。如果人们游览倦怠之后，不妨到这里来小坐，沏一杯香茗，看天边云彩，听水声溅溅，鸟语啁啾，放松放松自己的身心，该是何等快意的事情啊！