高仙芝聽了封常清的詳細彙報，知其所言非虛，於是接受了他的意見，率軍退往潼關。
到了崤山，隻有一條狹窄的通道。也不知是誰傳言，說安祿山的部隊追上來了。頓時，這隻臨時拚湊的部隊立刻暴露出致命弱點，士兵們四處逃竄，結果是自相踐踏，死傷無數。
高仙芝好不容易收攏好部隊。一趕到潼關，高仙芝和封長清就親自監督，加固城防工事，並在關前挖了三道寬兩丈、深兩丈的壕塹，以阻擋安祿山的騎兵。
安祿山部將崔乾佑率部隨後趕至，如果高仙芝和封長清不及時撤出陝郡，那就全軍覆沒了。
崔乾佑雖然驍勇，但是他的對手是名將，而且高仙芝和封長清據險以受守，幾次強攻，結果是損兵折將，崔乾佑隻好退居陝郡。臨汝、弘農、濟陰、濮陽、雲中等郡都降於安祿山。
當時，唐廷所征的朔方、河西、隴右諸道兵，尚未抵達長安，關中震動。幸好安祿山滯留洛陽準備稱帝，沒有全力進攻，加之高仙芝、封常清及時退守潼關，作好拒守準備，遏製了安軍攻勢，關中軍民慌恐之情才得以稍安。
高仙芝和封長清忙得昏天黑地抵禦強敵，一個沒事幹的人就不高興了，他就是宦官邊令誠。原來他好不容易有機會出宮，而且還當了監軍這樣重要的職務，心想一定要大撈一筆。從陝郡撤退時，高仙芝見倉庫裏的物質器械充實，命令士兵能拿多少就拿多少。邊令誠對軍用物質一點也不敢興趣，他裝了滿滿一車貴重物品，讓封長清幫忙，找士兵推車。封長清很忙，哪有閑心管他這點破事。
邊令誠又找高仙芝幫忙，高仙芝一口拒絕。高仙芝下令焚燒不能帶走的物質，這些東西不能留給安祿山。看著自己的一車貴重物品被燒，邊令誠心如刀割，心中升起無名怒火：我一定要殺你二人，以泄我心頭之憤。
封常清在反省，覺得之前說“十日內取安祿山首級”的話，是不了解敵情的。數萬人的流血犧牲，換來深刻的教訓。封常清一夜未睡，沉重的寫好總結，三次派使入朝上表陳述叛軍的形勢，但玄宗都不見。封常清隻好親自騎馬入朝報告，行至渭南，玄宗已下敕書剝奪了他的官爵。讓他以白衣在高仙芝軍中效力，高仙芝命封常清巡監左右廂諸軍，以助自己。
邊令誠趁入朝奏事，向玄宗反映了高仙芝、封常清敗退的罪狀，並說：“封常清常常在部隊裏說叛軍如何強大，動搖軍心，助長敵人氣勢；而高仙芝棄陝地數百裏，不戰自潰，而且貪汙糧餉。陛下，現在是戰爭時期，不嚴辦此二人，不足以正軍法。”
玄宗考慮良久，決定開殺戒。難道玄宗真的認為高仙芝、封常清是奸臣，非殺不可嗎？