張齊賢總結出一套平息賊寇之法，便心想著找一個機會實驗一下，以顯示自己的才能。奈何衡州境內甚是平靜，張齊賢隻能落入“巧婦難為無米之炊”的境地。於是，張齊賢就給呂蒙正、溫仲舒二位好友寫信，打探他們那裏可有賊寇，順便推銷自己的妙法。
如此折騰半日，將近傍晚時分，衡州驛館的客司突然前來稟報，說有一隊從汴京城而來的官差，押送著一群破衣爛衫的方士模樣的犯人，在驛館住了下來。因是京城來的官吏，張齊賢特意吩咐客司細心款待，不可馬虎。客司領命，退下了。
要說這群犯人究竟犯了何罪，其實也沒甚罪過，隻不過學業不精，沒通過皇帝陛下的考核而已。原來，千裏之外的汴京城中，皇帝陛下莫名地發神經，集中考核了各州送去的天文術士，合格者隸屬司天台，不合格的無用者刺配海島。
張齊賢有些後悔，早知道陛下如此任性，當初就不應該將衡州的天文術士解送去京城。雖然有些天文術士的確可惡，但總不至於流放到那麼遠的滿是瘴氣的邊地。張齊賢認為陛下如此任性胡來，非百姓之福，於是，決定上書與陛下評論一番道理。
曹保忠覺得此事茲大，火速將情況報告了鄭鹹熙。鄭鹹熙聽了，眉頭一皺，心想以張齊賢的性子，若要上書，定然會讓陛下吹胡子瞪眼，氣暈過去。當今陛下先拿私藏天文卜相之書說事，今又拿天文術士開刀，無外乎還是心虛作祟，怕有人居心叵測借助天文術士造勢起亂，說他的皇位來路不正。所以，與陛下討論這個問題，簡直就是在懸崖邊翻跟頭。
張齊賢提筆構思了一會兒，終覺得上書有許多不妥之處，隻得又放下了毛筆，將鋪開的文書又重寫折好，收了起來。“糟糕！”張齊賢猛然間想起一個人來，又呼了一聲“糟糕”，徑自起身便向州衙外而去。
待鄭鹹熙前來尋找張齊賢時，他已不見了蹤影。經詢問役卒，才知張齊賢親自到驛館去了。鄭鹹熙又回到州衙中，目光掃過張齊賢辦公的幾案，幾案上很幹淨，沒有存放什麼文書。鄭鹹熙懸著的心才終於落定了。
話說驛館中，京城來的官差將後院的館舍全部占了。兩位身材魁梧的官差把著門，禁止任何人隨意進出。從官差魁梧的體形來看，身高八尺，虎背熊腰，琵琶腿，像極了禁軍中的軍士。而那一群所謂的方士，就關在後院拐角處的一間房間中。官差如此嚴肅，想必定是陛下親自安排的，務必要將這群方士送到該去的地方。
張齊賢見此情景，隻得喚來客司，要客司幫忙打探一下方士們的姓名，“你好生款待他們，留意詢問一下，可有一個叫做呂合的方士。還有，本官沒穿官服前來，就是不想以通判身份示人，你應該明白怎麼做了吧？”
“是，卑職已經備好了酒菜，請大人放心。”客司又問道：“大人，你是要見見這位故人嗎？”
張齊賢點頭道：“如果他在裏麵，我定要見他一下。”
“卑職明白了。”客司答應下來，“大人，請先隨卑職到前麵稍作休息。”