令撤退。

康熙三十一年十一月三日，张无易率领五万兴夏军进逼江山，同一时间，魏怀远率领十万东路军开始反攻，王鹭眼见不好，不得不撤走正在进攻的清兵，朝着江山撤退。

十一月十日，张无易率领的浙江兴夏军与魏怀远率领的江西东路军在江山城南面贺村会师，此时，兴夏军的兵力已达十五万多，而王鹭率领的闽浙联军只剩下十万，双方的兵力彻底逆转。

王鹭也没有想到局势变化如此快，从进攻方变成了被进攻方，最重要的则是兴夏军比清军还多一半，要知兴夏军与清兵的战斗力一直以来就比清兵强，同样的兵力，如果是野战，兴夏军必定能击败清兵，而现在兴夏军比清兵还多，清兵已经处于劣势。

所以，王鹭一边在江山城附近修筑工事，一边向着安徽的索额图求援，一边派人向朝庭求援。