高宗一轉頭就對張俊說：“嶽飛實在是越來越過分了，居然幹預朝政。”
張俊幸災樂禍地說：“微臣早就說過嶽飛想成為權臣，皇上，此人不可不防啊！”
立儲之事讓本來就緊張的君臣關係變得更加脆弱，這件事發生後，宋高宗將嶽飛視為潛在的威脅。換句話說，嶽飛讓他產生了不安全感。如何消除這種不安全感呢，他隻能找張俊和秦檜商量，大家的共同意思是，一步步削弱分割嶽飛的兵權，最後將嶽家軍化整為零。要做到這點當然是一個漫長的過程，因為嶽家軍是一支凝聚力非常強的軍隊。
後來，劉光世的部隊中發生了兵變，發生兵變的原因是張俊奪取了劉光世的兵權，安排一個自己的親信到其中，結果惹毛了那般兵痞子。兵變雖然平息了，但引起了巨大騷動，高宗不得已罷免了張俊的相位。張俊被罷免之後，秦檜和趙鼎上位。
金國那邊人事變動也很大。首先是粘罕被皇帝和金兀術給整死了，接著金兀術和完顏昌又來到東京府，廢除了劉豫這個傀儡皇帝，準備送欽宗回東京府繼續當皇帝。
其實，這時候是北伐的最好時機，偽齊劉豫倒台，很多人紛紛倒戈投靠宋朝這邊。嶽飛和韓世忠等人也幾次請求北伐，可惜宋高宗就是不允許，不但不允許，還積極讓秦檜等人準備與金人議和。
抗戰派與投降派這時發生了空前激烈的鬥爭，抗戰派以嶽飛、韓世忠、李綱等人為首，投降派以秦檜為首。最終投降派勝利了，因為皇上站在投降派這邊。理由很簡單，高宗認為，內部的敵人比外麵的敵人更可怕，內部的敵人自然是以嶽飛為首的武將們。他很擔心武將們通過打勝仗擊敗金兵，然後擁兵自重。
紹興八年，高宗一意孤行，不顧眾人的反對，一心推行議和政策。為此他提拔秦檜為宰相，罷免了趙鼎，讓秦檜一手負責和談事宜。
秦檜倒行逆施，全國上下一片叫罵聲，都說秦檜是金人的奸細，很多人說要殺死秦檜。秦檜雖然害怕，但高宗在後麵說：“天塌下來有我撐著。”
和談在萬民的叫罵聲中完成了，秦檜本來就是金兀術的奸細，這次議和自然也是丟盡臉麵。
和談之後，嶽飛請求辭官。宋高宗當然不允許，強令嶽飛從此不得提辭官之事。
接下來，秦檜又陰謀奪取武將們的兵權，不過這個行動得不到任何人的支持，連高宗都覺得不妥。一旦拿走武將們的兵權，金兵打過來怎麼辦？