建元二年，衛少兒的妹妹衛子夫得到了漢武帝的寵幸，並於一年多後，衛家全族都受到了寵信，地位水漲船高。
而衛少兒因為曾經與曲逆侯陳平的曾孫陳掌私通，因此順理成章的嫁給了陳掌。
元朔元年，衛子夫在宮中被立為皇後。年幼的霍去病也因此躋身成為了當時最大的外戚家族的一員，過上了貴族兒郎的生活。
霍去病自小就展現出來了驚人的騎射天賦，又因為姑母衛子夫是皇後，經常能看到漢武帝。
一來二去，漢武帝也看到了霍去病身上的天賦，愛屋及烏，也喜歡上了這個便宜外甥。並讓霍去病做了自己的近臣侍中。
元朔六年，年僅十八歲的霍去病就被武帝任命為剽姚校尉，跟隨大將軍衛青出擊匈奴。
衛青接受詔令後，授予霍去病壯士。
隨後，霍去病就獨自帶領著輕勇騎八百人，直接甩下大軍數百裏，伺機突襲匈奴大軍。
這是他第一次率兵出征，卻一舉拿下了“斬捕首虜過當”的戰績。其中俘虜中就包括匈奴的相國、當戶等高級官員，同時也斬殺了匈奴單於伊稚斜的祖父輩籍若侯產，並俘虜單於的叔父羅姑比。
兩次戰績冠絕全軍，上下無一人不服。
大戰歸來後，漢武帝割下南陽郡穰縣的廬陽鄉、宛縣的臨駣聚為冠軍侯國，封霍去病為冠軍侯。
元狩二年，年僅二十歲的霍去病，再次被漢武帝任命為驃騎將軍。
年初，霍去病率領一萬驃騎軍出戰隴西，“逾烏盭，討遬濮，涉狐奴”，轉戰河西五國。
一路收獲了不少輜重人馬，且對降服者予以寬赦，在與單於的兒子交戰時，幾乎將其生擒。
緊接著，霍去病就越過焉支山，轉戰六天，急行軍一千多裏，最終在皋蘭山下與匈奴軍激戰，重創匈奴，殺死匈奴折蘭王、盧侯王，殲滅其精銳，渾邪王子及相國、都尉等全部被俘。
在同年夏天，霍去病與合騎侯公孫敖從北地郡率軍兵分兩路進軍。
公孫敖因為中途迷路而未按時趕赴戰場，未能與霍去病會合。
霍去病直接孤軍深入，遠涉浚稽山南的湖澤，越過居延海，降服小月氏，最終打到了祁連山，俘獲得單於單桓、酋塗王，收降其相國、都尉以下的降者二千五百人。
在此役中，讓匈奴的實力受到一次極大的打擊，而漢軍自身折損卻僅約十分之三。
漢武帝收到傳回的捷報後，再次加封霍去病食邑五千四百戶。
元狩四年春，漢武帝繼續任命衛青與時年二十二歲的霍去病各率騎兵五萬，步兵數十萬，分別從定襄和代郡兩地出發，深入漠北，尋殲匈奴主力。
霍去病率五萬騎兵，以將軍李敢等為大校，從代郡出發、右轉北平郡，一路北進兩千多裏。