陳昌迅速地傳書從臨淄調來了劉曄，任命他為濟南郡太守，讓他負責管理濟南郡，同時處理東平陵的政事，讓他自己組建郡縣班子，同時要求他嚴格徹底審查濟南郡下各縣原來的那些官員們，對於有惡跡的人必須嚴懲不殆，以此來恢複濟南郡老百姓對朝廷的支持。
這是因為濟南郡一向是青州刺史田楷的大本營，加上郡守又是田分，所以下麵的各縣官員恐怕大部分都是他們的親信，自然與他們是一丘之貉，不值得陳昌信任的。
而現在嚴厲地處罰他們，正是為了震懾那些有異心的分子，同時也是為了收買濟南郡的民心，畢竟他們長期處於青州刺史田楷的統治之下，在思想上也許會受到田氏的影響。
劉曄有此機會自然是大喜過望了，陳昌還讓他修書給孔融，將孔融手下的邴原、是儀、左丞祖、劉義遜、孫邵等人召來重用，令這些在孔融手下本來沒有多少事情的人大為感激陳昌的識才，而孔融也不好留下他們，從而避免了這些人以後如同曆史上那樣全都避亂到江東去了。
其中特別是孫劭此人，曆史上更是曾經擔任過東吳的首任丞相的，能力是相當地出眾的，現在陳昌專門任命了他擔任濟南郡丞，給了他施展才華的機會，以後更是將會做為郡守的候選人來培養的。
三天之後，許褚、典韋、關羽和武安國分別先後歸來，他們已經按照陳昌的吩咐將台縣、鄒平、博昌、平壽、高密幾縣殘存的黃巾餘賊剿滅了，僅有極少數之人躲進了深山之中，不過陳昌並沒有讓他們趕盡殺絕，而是同樣采取了招降的政策，大多數普通百姓都回到了自己的家鄉去了。
“黃巾餘賊雖然基本上剿滅了，但是也要防止個別極端分子會時不時出來搞一些破壞，所以全郡各縣各鄉各裏的民兵組織必須盡快建立起來。特別是其中有一部分是原來的守軍，允許他們加入民兵組織之中擔任初級教官，給予他們一定的報酬，讓他們慢慢地轉變角色身份。不過，各縣也要加強對老百姓的督促，不能再讓他們走上過去的老路了，所有有過前科的老百姓，若是還有第二次加入賊寇的舉動，一律視為頑固不化處理。但是，也要避免我們的一些地方官員借此機會滋事生非的，要求他們必須對這些老百姓一視同仁，如果地方官員有為非作歹的，一律重處，必要時可以殺一儆百。”
三天之後，果然從臨淄轉來了消息，黑山賊張燕的萬餘大軍分兵兩路，分別攻向了臨淄和蓬萊。隻不過臨淄有老將黃忠坐鎮，加上各縣各鄉的民兵，讓他們吃了一個敗仗，現在已經撤退往主力部隊的方向去了。
而蓬萊距離東平陵較遠，此時還沒有消息傳來，不過陳昌如今已經騰出了手腳來，在東平陵留下了一千由原來的守軍訓練後的青州軍，帶著一萬餘人分五路出發，要截斷黑山賊的後路。