潭州与南汉辖境相接，以是此次宋军征讨南汉。赵匡胤便命潘美挂帅出征。这里还要说一句，潘美不但是征南汉的主帅，还是厥后曹彬征南唐的都监、党进征北汉的副帅，太宗灭北汉的主帅，平生建功无数，荣宠不衰。身后还获得了配享太宗庙的殊荣，至于演义中对他的歪曲，是没有任何按照的。
本来拥兵镇守贺江口的潘崇彻，因见局势已去，也主意向宋军投降，潘美便顺势向马径进军。郭崇岳不敢迎战，掉头就跑，回到广州劝刘鋹投降。
但是船刚备好，就被寺人乐范伙同一队卫兵盗走。刘鋹无路可逃，又自作聪明地以为宋军出兵，美满是因为垂涎本身的珍宝，以是只要把珍宝先行毁掉，让宋军进城以后一无所获，他们不久以后就会撤兵，因而当即命令放火烧城。一夜之间，就把广州城内的府库宫殿烧得一干二净，无数珍宝化为灰烬。
这是南汉的最后一支军队了，此败北后，刘鋹既无险可守，又无兵可派，只好想着逃窜，因而命人找来十余艘大船，满载珍宝，筹办出海流亡。
说来也巧，这时俄然刮起大风，火借风势，越烧越旺，汉军被烧得一踏胡涂，自相踩踏，死伤狼籍。紧跟厥后，潘美又率宋军主力杀到，汉军一战击溃，几近全军淹没。
伍彦柔倒是没有推让，领命以后就率万余海军乘船出西江入贺水（今贺江）北上，于玄月二旬日晚达到贺州城外，遂传令安营于南乡（今广西贺县南），筹办第二日入城。这个时候，潘美已经率军围困了贺江，他得知南汉救兵到达的动静后，心生一计，随即传令全军后撤二十里，却连夜在贺水岸边设下埋伏。