到了公元前119年春，朝廷為了徹底擊潰匈奴主力，集中全國的財力、物力大舉征討匈奴的時候，劉徹幹脆將衛青名義上的主帥也給撤掉了。他命令大將軍衛青、驃騎將軍霍去病分別率領五萬精騎，兵分東西兩路，遠征漠北。雙方互不節製，分頭行動。
衛青的運氣也實在不好。匈奴大軍將衛青的部隊當作了主要防範對象。衛青的大軍翻越大沙漠，奔波上千裏之後，遭遇了以逸待勞、嚴陣以待的匈奴軍隊主力。雙方的騎兵在草原上激戰，殺得天昏地暗。一直打到黃昏，草原上突然刮起沙塵暴，飛沙走石，遮蔽了天日，雙方根本就看不清敵我。衛青畢竟是個久經沙場的將軍了，他派遣預備隊從兩翼迂回到匈奴軍隊的背後，包圍了單於的大營。這一招妙棋，使得戰場的形勢朝著有利於漢軍的方向發展了。匈奴單於首先喪失了信心，跨馬突圍逃跑。衛青率大軍乘夜突擊，向北一直打到現在的蒙古首都烏蘭巴托地區，燒毀匈奴輜重，勝利班師。
另外一邊的霍去病，因為有舅舅纏住了匈奴軍隊的主力，進展非常順利。他一路高歌猛進兩千多裏地，殲滅匈奴七萬多人，俘虜匈奴王爺、將軍等近百人，立下了比舅舅大得多的功勞。匈奴人一蹶不振，開始向西北遷徙。曆史記載之後“漠南無王庭”。
天下終於太平了。外部的敵人沒有了，漢武帝和朝廷還需要聲望超群、領兵馳騁的衛青、霍去病嗎？現在軍功不可能再有了，隻剩下皇帝的猜忌和防範。所謂“飛鳥盡，良弓藏；狡免死，走狗烹”，說的就是如此微妙的時刻。
劉徹繼續捧霍去病去壓衛青，防止衛青家族團結一致，威脅皇權。衛青、霍去病凱旋，衛青是大將軍，霍去病是驃騎將軍，又是萬戶侯，沒辦法再提拔他們了。劉徹很有創意，新增了“大司馬”的官職，讓衛青、霍去病並列為大司馬。衛青是大司馬兼大將軍，霍去病是大司馬兼驃騎將軍，待遇相同。劉徹把霍去病置於和衛青同等的地位。
這是一個很明顯的信號。那些牆頭草和勢利小人紛紛給霍去病拍馬屁，有事沒事往霍去病家裏跑，套近乎，其中就有很多原來經常在衛青家裏出現的麵孔。衛青家門口一下子就冷清了起來。好在衛青是一個厚道恬靜的人，看開了。他家裏人有時候也會感歎世態炎涼，衛青不以為然，認為這是人之常情，一聲不響地過著恬淡平靜的“寓公”生活，毫無怨言，和平陽公主相敬如賓，對劉徹畢恭畢敬。
衛青有一個一以貫之的優點，就是為人謙讓仁和，在權勢最顯赫的時候不以勢壓人，更不結黨幹預政事。因此，雖然衛青已經沒有了實權，威勢不如以前了，但人緣還不算差。起碼劉徹還很給這個小舅子麵子，形式上應該照顧到的地方都給衛青照顧到了。
霍去病的人緣就沒有舅舅那麼好了。霍去病很早就在宮廷中當官，富貴來得容易，帶著貴族公子哥的味道，給人的感覺不太好。出征打仗的時候，劉徹照顧他，派人給他送去了數十車的好東西。霍去病看上了車，把車裏的糧食和肉卻給扔了。要知道，許多從軍的士兵平時吃不飽飯。霍去病卻從來不注意官兵們缺衣少糧的情況，自顧自地穿戴整齊華麗。這樣的人有皇帝的垂青，在下麵的人緣卻好不到什麼地方去。不過話又說回來了，皇帝喜歡的就是霍去病這樣隻知道打仗、頭腦簡單、人緣差的功臣。
可惜，霍去病大勝歸來沒幾年，就在元狩六年（公元前117年）英年早逝了，隻活了二十四歲。劉徹很傷心，把霍去病的葬禮辦得風風光光，把霍去病的墳墓修建在自己的陵寢茂陵旁邊，造得像祁連山一樣，紀念他的戰功。