柳靖陽卻道：“此事萬萬不可，虞大人你乃是軍中主帥，應當留守在帥帳之中才對。”虞允文道：“前方將士都在浴血奮戰，虞某不能親自殺敵便已經很是慚愧了，豈能還繼續龜縮在這裏。”柳靖陽道：“可前方戰事還未明朗，萬一金兵若是成功渡上了江岸的話，那虞大人可就有生命危險了。”虞允文道：“若是金兵當真渡上岸來了，那虞某便立即挺劍殺敵就是，如果不能將金兵成功阻止在采石磯，虞某縱然留下性命，日後也會背上千古罵名的。與其被人唾罵，還不如親赴前線與眾軍助威，如此一來，至少是可以極大的提升將士們的士氣的。”
柳靖陽聽虞允文如此說了，便不好再行相勸，當即領著趙恩銘等人與虞允文一起來到了江岸之上。這個時候宋朝的所有水軍戰船已都已經裂開了陣勢，時俊正要準備下令戰船開拔，突然之間卻見虞允文竟然親自來到了江岸之上，神色立時大驚，趕緊下船奔了過來，說道：“虞大人你此刻不留守在營帳之中，卻趕到這裏來做什麼。”虞允文道：“我身為全軍統帥，乃是前來為大家助戰的。”時俊卻道：“可這裏立刻就要變作戰場了，虞大人你乃是文官出生，留在這裏會有性命危險的。”虞允文道：“我留在這裏會有性命危險，難道你們就沒有性命危險了，時將軍你莫要為此時多言，趕緊將我帶上你負責指揮的戰船，我有話要對將士們說。”
時俊道：“虞大人你還想說什麼。”虞允文道：“時將軍你現在不要多問，將我帶上戰船不就知道了。”時俊無奈，隻得領著虞允文上到了自己的戰船。虞允文登上戰船之後，徑直站在了船頭的甲板之上，對著所有的宋軍將士說道：“將士們，自金兵此次進攻以來，咱們宋軍連接不戰自潰，如今對岸的金兵又要準備開始渡江了，若是金軍成功渡江，那麼他們便會長驅直入，直接向我們大宋的都城臨安進兵的。一旦到了那個時候，你們又能逃往哪裏？現在我軍控製著大江，若憑藉長江天險，為何不能於死裏求生？何況朝廷養兵三十年，為什麼諸位不能與敵血戰以報效國家？虞某雖然隻是文人出生，不過今日卻誓於金人血戰到底，絕對不會在此後退半步，望諸位將士也能似虞某一般，拚死殺敵。”
在場的所有宋軍將士聽虞允文說了這話，登時都高聲叫喝了一起，道：“誓與金兵血戰到底，絕不再後退半步。”虞允文見所有的宋軍士氣都上來了，又即開口說道：“好，那虞某就在江岸上給大家助戰，望大家都能多殺幾個金兵，並凱旋歸來，到時候虞某一定為你們記功的。”所有的宋軍又都一起叫道：“大家都要多殺幾個金人，爭取立下頭功啊。”在宋軍叫喊聲中，虞允文走下了戰船，回到了岸邊，之後時俊又登上了船頭，當即下達了作戰命令，讓戴皋、盛新分別率領戰船三十隻，作為左右兩翼分別防守江岸的東段和西段，讓明教教眾和武林各大幫派的弟子也分別率領三十隻戰船，蔭蔽在港汊中，充當預備隊，而剩下的所有戰船則作為突擊兵力，居於諸隊人馬之中，由時俊親自率領。
命令下達已畢，就見對岸數百艘船隻，自西邊方向渡了過來，七十餘艘先頭船已經迫近江岸，時俊當即手執雙刀，領著主力戰船奮勇殺出。雙方船隻就要靠近之時，時俊一聲令下，宋軍戰船上霹靂炮連續擊出，這霹靂炮雖然不能擊沉對方的船隻，不過所釋放出的煙霧卻有遮蔽敵人眼目的效果。因此片刻之間，金兵船隻周圍就聚集了一層濃濃的煙霧，使得所有的金兵都似瞎了一般，無法看清四周的情況。便在這個時候，宋軍戰船一起衝殺了過去，宋軍戰船不但機動性好，而且船體堅固，攻擊力強，反觀金兵的船隻，都是臨時拆用民房的木材建造的，很不牢固，因此一撞之下，大部分船隻都被撞沉或是撞毀。宋軍士卒這時又是士氣大盛，無不以一當十，因此很快金兵先頭的七十艘船便全部都被消滅了。
然而金兵雖然初戰就損失了七十艘船和上千名士兵，不過卻並不肯退卻，第二波上百艘船隻又攻了過來。時俊見狀，當即又立即指揮本部戰船前去進行迎戰，這一次由於霹靂炮彈不足的原因，與金兵交戰之時，比之第一戰要慘烈了許多。好在金兵大多不識水性，又不懂得水麵戰法，因此經過一個多時辰的浴血奮戰，第二波金兵戰船又全部都消滅。隻是連續兩場大戰之後，時俊所率領的戰船也出現了不同程度的損傷，好幾十艘戰船不得不退出戰鬥，進行整修。中午時分，金兵第三波戰船又攻了過來，這次渡江而來的船隻數量雖然隻有七八十隻，不過戰船上的金兵卻人人彎弓搭箭，未及將船隻開到宋軍戰船之前，就已先行將弓箭射了過來。