烏維順著趙能的手指看去，的確看不到句黎湖的大旗了，也不知道他是死是活，看來一切都完了。
烏維終於下了決心，他對趙能說：“你趕快去找左賢王，能撤多少撤多少。”他並不擔心自己的左翼撤下來後會被漢軍追擊，那裏的漢軍已經是強弩之末了。
烏維又對旁邊一個傳令兵說：“你去告訴左大都尉，讓他再堅持一會兒，等左賢王那裏退下來他才能退。”
等趙能和傳令兵都走了，他才咬咬牙，對身後眾將說：“撤！我們走！”說著，帶著手下一萬多人向北退去。
烏維的撤退，宣告了匈奴人這場戰役的徹底失敗，其實就算他不撤，也不可能改變什麼，隻能使雙方增加更多地傷亡。
劉據和張全看到烏維撤退，也沒有急於追趕，他們想的是盡量減少已方的傷亡，畢竟匈奴人還有近十萬人在戰場沒有撤出去。劉據傳令徐自為，讓他帶隊支援李息和李朔，以最快的速度消滅中路的匈奴人，然後兵分兩路，分別支援左右兩翼。劉據的目的很明確，就算多放走一些匈奴人也無所謂，隻要自己的傷亡不再擴大就行。因為他知道匈奴人不再會對大漢造成威脅，如果曆史真的重演，那麼，匈奴人將是西方人的惡夢。
當徐自為的一萬騎兵進入戰場，匈奴人徹底絕望了。且提侯再也擋不住三個營的騎兵輪番地衝鋒，他一咬牙，派出三千最精銳的重騎兵進行反衝鋒，用自殺的方式贏得了富貴的撤退時間。這三千人是他最後的本錢，不過為了能多給匈奴留點血脈，他已經顧不上許多了，他乘著這三千鐵騎發動決死衝鋒的時候，帶著周圍能找到的殘兵敗將向北退去。
李息和李朔殺得性起，兩人身先士卒，親自帶隊衝在最前麵，就在他們把匈奴人殺得節節敗退的時候，一隊匈奴人的重騎兵衝了過來，兩人猝不及防，一頭撞進了敵陣，等到二人的親兵拚死把他們倆救出來的時候，兩人都受了重傷。匈奴人的三千鐵騎最後還是被漢軍包圍、殲滅，但他們拖住了李息和李朔的羽林、越騎兩營人馬，為且提侯的撤退贏得了富貴的時間。
趙能剛剛找到烏師廬的時候，漢軍已經發動了最後的突擊，他根本來不及撤出部隊，隻好下達命令後讓大家自己尋找生路，他本人則帶著一小隊騎兵護著烏師廬追趕烏維去了。最慘的是句黎湖，烏維撤退時他並沒有死，他當時被優勢兵力的漢軍圍攻，所以根本沒接到撤退的命令，也不知道別人都在逃命，他一麵苦撐一麵等待援軍。等他發現別人都逃走的時候已經失去了最佳的突圍時機，徐自為已經帶人從中路包抄過來，句黎湖這才下令向北突圍，可他在率部突圍時死於亂軍之中，所部騎兵隻有千餘人逃了出來，其餘大多戰死，少數投降。