霍去病封侯的第三年，被任命為驃騎將軍。這年夏天，霍去病與公孫敖一齊從北地郡出兵，分兩路。張騫、李廣則一齊從右北平郡出兵，（也）分兩路。李廣率領(lǐng)四千騎兵先到（目的地），張騫率一萬(wàn)人馬后到。匈奴左賢王帶領(lǐng)數(shù)萬(wàn)騎兵圍攻李廣，李廣與敵人激戰(zhàn)兩天，死者過(guò)半，所殺敵人也更多一些。（直到）張騫（率部隊(duì)）到，匈奴才帶兵退離。張騫因?yàn)椴筷?duì)行動(dòng)淹留遲緩，罪判斬首，但贖罪為民。霍去病深入北地，捕殺敵人很多。公孫敖卻迷失了道路。武帝因他沒(méi)有與霍去病會(huì)師，罪判斬首，但贖罪為民。眾多老將所率領(lǐng)的兵馬都不如霍去病。霍去病所率的士卒常常選拔（驍勇善戰(zhàn)的人來(lái)補(bǔ)充），但他自己也敢于深入敵區(qū)，常常與精壯士卒奔馳于大軍前面。他的部隊(duì)也是有老天保佑，從沒(méi)遭遇困難絕境。但眾多老將卻常常滯留在后，際遇不好而難取功名。從此霍去病日益因（受武帝）寵愛(ài)而顯貴，（地位）和大將軍衛(wèi)青相等。

第二年春，皇帝命令大將軍衛(wèi)青、驃騎將軍霍去病各率五萬(wàn)騎兵渡過(guò)沙漠打擊匈奴單于，那些敢于死戰(zhàn)、深入（敵陣）的士卒都屬于霍去病，李廣、趙食其等人則屬于大將軍衛(wèi)青。衛(wèi)青與匈奴單于激烈會(huì)戰(zhàn)的時(shí)候，李廣、趙食其率軍隊(duì)另外從東邊進(jìn)入，（因?yàn)椋┯袝r(shí)迷失了道路（落后于大將軍到達(dá)會(huì)合地）。大將軍追逐單于失敗，率（軍）回來(lái)，才碰到（他們）。衛(wèi)青要派使者回（朝廷）報(bào)告，令長(zhǎng)史根據(jù)文書所列罪狀責(zé)問(wèn)李廣，李廣自殺。趙食其贖罪為民。

那時(shí)，霍去病從代郡、右北平郡出擊二千多里，所捕殺敵人的功勞已多于衛(wèi)青了。（武帝）于是讓二人都為大司馬。從此，衛(wèi)青權(quán)勢(shì)日益衰落而霍去病日益顯貴。

霍去病為人少言辭不泄露事情，有勇氣敢做敢當(dāng)。武帝曾想教他學(xué)習(xí)吳起孫武的兵法，他回答說(shuō)：“（打仗）看謀略怎樣罷了，不必學(xué)習(xí)古代兵法。”武帝替他修了一座宅第，讓他看看，他回答說(shuō)：“匈奴不消滅，沒(méi)有心思顧家??！”從此武帝更加重視寵愛(ài)他。但（他）很小就當(dāng)上侍中，被貴寵慣了，并不關(guān)心士兵。他率軍隊(duì)出征，武帝還要替他派遣太官贈(zèng)送數(shù)十輛滿載食物的膳車?；貋?lái)時(shí)，輜重車上丟棄了許多剩余的精米肥肉，但士兵中卻有挨餓的。在塞外（作戰(zhàn)）的時(shí)候，士卒缺乏糧食，有的人餓得不能爬起來(lái)，但霍去病卻還開(kāi)辟場(chǎng)地踢球。此類事情很多。

霍去病逝世。武帝對(duì)此很悲傷，調(diào)發(fā)穿玄黑鎧甲的士兵，從長(zhǎng)安列隊(duì)到茂陵。為他定謚號(hào)，合并“武”與“廣地”兩層意思稱他為“景桓侯”。