祠山张渤的籍贯和出生年月，具有相当的传奇性，古书上有多种不同的记载，其中有两种说法，他是远古时代夏禹时期的人。

1、《万历绍兴志》载：“祠山大帝佐禹治水有功，后礼斗横山，其赛祷盛于广德州”。

2、《留青日札》及《祠山志》载，大禹治水的助手是张渤父子两人，张渤之父名张秉，尊龙阳君，因张渤治水有功，“以水德王其地，后称祠山神”。

据宋代吴曾《能改斋漫录》及《广德州志》载：张渤是武陵龙阳人，生于西汉神爵三年（公元前59年），身长七尺，英气勃发，先后与柳氏李氏为婚，生五子、一女、八孙，张渤精通道业，统领阴间兵马协助凿通河道。他要从浙江长兴开挖一条运河，贯通安徽广德，经东亭，通“无量溪”到桐汭河，经郎川，沟通南漪湖，直达长江。张渤因驱使阴兵开河，不让夫人到前沿工地，事先与李氏密议，送饭时以鼓响三声为约，必至。厥后，因遗食于鼓，鸟啄鼓响，王至鼓坛，乃知鸟为所误。逡巡，夫人至，鸣其鼓，王以为前所误而不至，夫人遂至兴工之所，见王为大猪，驱役阴兵，开凿河渎。王见夫人，变形未及，从此耻之，遂不与夫人相见。圣渎之功遂息。张渤从此隐居广德横山之巅，潜心修炼，夫人李氏亦至县东二里而化。圣渎之水虽涸为民田，广德的老百姓还是感激张渤治水之功，于是就在横山建造了祠山庙，塑像供奉，又在城关东门修建了“昭妃庙”（俗称娘娘殿，现东关小学处），世代祭祀。