开宝三年（970年），九月，南汉主召大臣议，皆请以潘崇彻将兵御之。崇彻自罢兵柄，常怏怏，于是辞以目疾。南汉主怒曰：“何须崇彻，伍彦柔独无方略邪！”遂使彦柔将兵来援。戊午，宋师闻彦柔至，退二十里，潜以奇兵伏南乡岸。彦柔夜泊南乡，迟明，挟弹登岸，据胡床指挥，而伏兵猝起，彦柔众大乱，死者十七八。擒彦柔，斩之，枭其首以示城中，城中人犹坚守弗下。随军转运使王明言于潘美曰：“援兵将至，当急击之。”诸将颇犹豫，明乃率所部护送辎重卒百馀人，丁夫数千，畚锸皆作，堙其堑，直抵城门。城中人大惧，开门以纳，遂克贺州。