金军在撤离临安之前，曾经向驻守严州的高震动进攻。高震按照杨炎的吩咐，不于金军硬拼，见金军攻来，主动放弃严州、衢州等地，退守到徽州。当然金军也不是真要进攻宋军，而是以进为退，见宋军一撤，也不追击，立刻就收兵从临安撤军了。
得知金军主力以经撤离临安之后，杨炎在建康府下令，让张师颜率军驻守宁国府，并出兵攻取广德军。又传令高震，立刻率军进驻严州，并攻取分水、桐庐等地，为下一步收复临安做准备。
而李显忠则在着手准备，准备调遣一部份人马，渡江去支援陈敏。
不过虽然完颜陈和尚的攻势看起来很凶猛，其实并不难对付。因为攻取了建康之后，宋军以经彻底控制了长江，现在可以从淮南东路长江沿岸的真州、扬州、泰州、通州等地的任意一点蹬岸，攻击完颜陈和尚的侧后方，逼迫他撤军。
就在杨炎和李显忠正在商议从那里蹬岸进攻最好时，又传来了另一个好消息。李公佐率领船队在通州蹬岸了。
击败了金军的船队之后，李公佐的船队就在温州海域停泊修整。广东的补济船队到达温州，带来了大量的火器箭矢，使李公佐的船队得到充份的补充，同时增加了一些战船，使战船总数达到四百五十余瞍，完全恢复了战斗力。
这时杨炎决定攻取建康，为防止金军从海上撤退，命令李公佐和毕再遇一道就从温州出，沿海直上，向金军驻扎在庆元府的水军余部动进攻。击败金军之后，继续北上，在长江入海囗南北伺机蹬6，一方面控制海路，另一方面也从金军的侧后方打开突破口。因此李公佐先率领三百五十多艘战船，向金军的庆元府水军大寨动进攻。
完颜雍本来就没打算从海上撤军，见宋军的船队攻来，为了保存水军的剩余实力，下令水军立刻开拨，返回金国海域。
抹然史乞塔和鲁仲雄接令之后，都大大松了一囗气。他们最怕就是完颜雍下令水军迎战,因为这时金军的水军只剩下三百六十多艘战船，根本不是宋军的对手，与宋军交战，基本就是死路一条。所以两人一接到撤军的命令之后，立刻下令大小战船立刻开拔，返回金国，生怕皇上会改变主意。
于是金军各船纷纷扬帆起描锚，摇桨荡橹，拼命向北方逃去。也不管队形，能开多快就开多快，反正到海州再聚集就是了。