随后，元军进军宗像海，经将士们死力相搏，以大船打败日本小船，才扭转了前日败局。
范文虎所率江南军由于阿剌罕病逝以及与忻都军不太协调，希望与忻都军会于平户岛，因此未能按期赶至壹歧岛，直至忻都军进军宗像海，赶至次能、志贺二岛，两军才相会一处，同泊于两岛之上。
这时，日本诸道军队集结起来，开始全面反攻。面对日本来敌，是战是退，元朝与高丽联军内部意见产生分歧。高丽将领金方庆力主进攻，元朝将领坚决反对，最好只好按元将意见退舶鹰岛(五龙山，在今佐贺西北伊万湾)。
同年八月一日，海面突然刮起大风，那车轮般的旋风，卷起巨浪，将船只高高举起，随着风浪旋转不停，大小船只互相撞击，沉没无数。
范文虎见状心惊胆战，急忙率领几个士兵，挑选坚好船只，丢下军队狼狈逃回。