“朕諭張廣泗統率進剿，進入蠻荒，一切經營控製，可謂殫心竭慮，而如今將臨年關，前方戰爭仍無消息，這未免是張廣泗急於告捷，竭力督率，在營將士，因其督責過嚴，未免人懷怨望。”
正如同乾隆所言，前方將士心中對張廣泗的怨恨越來越大，他們不滿張廣泗的嚴行督責。恨張廣泗全然不顧他們的死活。隻知自己建功立業，而全然不顧及兵卒已是疲憊不堪的身體。漸漸地，前線兵弁對於攻取石碉漸生膽怯，攻擊石碉也沒有以前那樣賣力，此時的張廣泗也是進退兩難，沒有辦法。
這日乾隆正在養心殿閱折，訥親進來奏道：
“皇上，張廣泗前方來奏，官軍剛吃了敗仗。”
乾隆聽了一驚，立即從訥親手中接過奏疏展開一看，不禁惱羞成怒，原來上麵張廣泗如實奏報了前方情況，“九月初四日已降服的金川，複行背叛，帶領金川番民千餘人搶占我軍營後山梁，截了我糧草供應，臣雖極力督促兵弁欲重新奪回後山梁，但怎奈此地地勢險要，臣不得重新奪回此地，十一月底，莎羅奔又派人來夜圍攻張興營盤，在山梁上安設木架，以機發而下擊。十二月初，金川蠻兵齊發機關，官兵相率逃奔，自相踐踏，墜崖死者甚眾。張興軍營絕糧多日，士卒困憊，以向金川蠻兵買路求生。莎羅奔設計把官兵分為三撥，到入山溝底，待官兵將武器交出後，蠻兵上前屠殺，除三百多名官兵已先行逃過河去，所剩六百餘人，無一幸免。”
乾隆看到張廣泗的這份奏疏，已給氣得臉色發紫了，他拍著桌子厲聲喝道：
“真丟朕的臉，前線出現如此敗仗，不歸由張廣泗指揮無能，還能歸由什麼呢？哼！朕讓張廣泗統率幾萬兵卒攻取小小的金川之地，可不想卻屢戰屢敗，實在是有辱聖命。”
“皇上，奴才這兒還有一份張廣泗的奏疏。”訥親在一旁道。
“嗯！給朕看看。”乾隆說著就從訥親手中接過奏折，他清楚可能又是敗跡，但沒想到敗得那麼慘：
“守衛碉卡的八十餘名兵卒私下與蠻兵講和，隨後開碉與蠻兵渡河而去。蠻兵四、五百人攻占官軍營壘，將領陣亡。馬良柱軍營乏糧已久，官兵隻得煮革甲而食，蠻兵再攻，惶遽掖退，以致官兵自相殘殺，輜重全部遺棄。”
乾隆現在已經不再罵張廣泗無能了，也許是氣得太厲害，他看完張廣泗奏疏，一言未發地放在了禦案上，過了好大一會兒才問訥親道：
“訥親，前線情況如此，你以為朕當如何？”
“皇上，奴才以為當派人前往軍營了解情況，查清到底是張廣泗的無能，還是莎羅奔太厲害，還是別的什麼原因。”
乾隆點了點頭道：
“那派誰去呢？”
“奴才以為最好派班第前往。”
班第是兵部尚書，又是軍機大臣，其身份自是相當合適。乾隆決定派班第到張廣泗軍營去，調查實際情況。
“班第，如今前方相當吃緊。”班第明白乾隆所說的前方的意思，無非就是指張廣泗軍營這段時間來一直吃敗仗而已，果然，其實也不是果然，因為班第已了解一點這些消息，隻是不是了解得很全，所以他知皇上必將這件事兒說出來。“張廣泗在金川屢屢敗北，軍營糧草練兵供應甚是不利，朕想讓你到軍前去了解軍情，同時代替紀山督運糧草。紀山此次甚失朕望，本望他與張廣泗好好合作，盡量早一日拿下金川，卻不想他們竟然借此機會相互報複，以致於糧道為蠻兵所截，這裏有張廣泗指揮不當的原因，亦有紀山督運不得力之原因。班第，朕此次派你前往，不為別的，隻是想讓你到前線將具體情況奏報給朕，以便朕重新部署兵力。”
“是，皇上，金川兵事有關國家大體，奴才不敢稍存大意，到得軍營，奴才定當仔細向皇上稟明前方情況。”
“嗯！好，你明日就啟程吧！”
班第到得金川以後，日督糧草，很是勤勉，官兵的糧食問題得以解決，但他越來越了解張廣泗並不是皇上所誇的那麼神勇，因而他上了一疏上奏乾隆：
“奴才自年初到得金川以來，便日查前方軍事失利之原因。奴才經過仔細查訪，奴才以為這全是將帥不得力之故。大金川地，縱不過二三百裏，橫不過數百裏，番民也不足萬人。而現在前方軍營，所集漢土官兵，及新調陝、甘、雲、貴人川兵丁，已至五萬，乃聞將弁怯懦，兵心渙散，土番因此觀望。奴才以為皇上臨此情況，不如另派將帥前來以代張廣泗。”
乾隆接到班第奏折後，沒有通知訥親，而是叫來了傅恒，因為傅恒以前力主對大金川用兵，他自是知道該如何去打，該如何遣將。所以他將傅恒找來便道：
“傅恒，朕派班第前往軍營查訪，終得知乃張廣泗指揮不得力所致，班第建議朕另派將領，你以為如何？”
“皇上，奴才以為還是讓張廣泗領軍於前，但可派班第為經略，以此共商進兵事宜，不知皇上意下如何？”傅恒反應果是敏捷。
“好！”乾隆想了想說，“就依你說，朕即委班第為經略。”
再說前方軍營真是令人悲傷，這段時間金川地帶經常天降大雪，天氣寒冷，官兵不適應。莎羅奔抓住這個機會，經常派兵衝擊清營。清軍手不能持兵器，又穿裝笨重，一見金川兵弁前來進攻，便隻得慌忙撤退。莎羅奔大喜，開始有些蔑視張廣泗官兵，不，原來就蔑視，隻是現在更加蔑視，他現在不單蔑視張廣泗，甚至於蔑視官兵，蔑視皇上。
莎羅奔經常支使蠻兵在前麵叫喊：
“張廣泗，你這個蠢蛋，皇上不是說你很厲害嗎？怎麼在這個地方玩了七、八個月了，還隻是損兵折將呢？張廣泗，你真是一個大笨蛋，哈哈！”
有些蠻兵還不滿足於隻罵張廣泗，而且他們連乾隆也一起罵：
“張廣泗，你們那個混賬皇帝讓你來打我們，純粹是癡心妄想，你自己怎麼不好好想想，就憑你那點本事能攻下我們的石雕嗎？你就做夢吧！”
麵對金川兵的叫罵，剛開始張廣泗還命令兵弁進攻那些罵人的石雕，但是每次都是以慘敗告終。沒辦法，張廣泗隻能讓兵弁們與之對罵。這些兵弁們原本就已經對張廣泗很是不滿了，現在有人幫他們出氣，他們心裏正高興呢，誰也不肯為張廣泗賣力氣，隻是有氣無力地喊兩聲裝裝樣子罷了。
班第了解到這些情況之後，已經知道前方兵弁已經恨透了張廣泗，所以，他再次上奏折請求換前方將領，以便更好地消滅莎羅奔的囂張氣焰。