乌维顺着赵能的手指看去，的确看不到句黎湖的大旗了，也不知道他是死是活，看来一切都完了。
乌维终于下了决心，他对赵能说：“你赶快去找左贤王，能撤多少撤多少。”他并不担心自己的左翼撤下来后会被汉军追击，那里的汉军已经是强弩之末了。
乌维又对旁边一个传令兵说：“你去告诉左大都尉，让他再坚持一会儿，等左贤王那里退下来他才能退。”
等赵能和传令兵都走了，他才咬咬牙，对身后众将说：“撤！我们走！”说着，带着手下一万多人向北退去。
乌维的撤退，宣告了匈奴人这场战役的彻底失败，其实就算他不撤，也不可能改变什么，只能使双方增加更多地伤亡。
刘据和张全看到乌维撤退，也没有急于追赶，他们想的是尽量减少已方的伤亡，毕竟匈奴人还有近十万人在战场没有撤出去。刘据传令徐自为，让他带队支援李息和李朔，以最快的速度消灭中路的匈奴人，然后兵分两路，分别支援左右两翼。刘据的目的很明确，就算多放走一些匈奴人也无所谓，只要自己的伤亡不再扩大就行。因为他知道匈奴人不再会对大汉造成威胁，如果历史真的重演，那么，匈奴人将是西方人的恶梦。
当徐自为的一万骑兵进入战场，匈奴人彻底绝望了。且提侯再也挡不住三个营的骑兵轮番地冲锋，他一咬牙，派出三千最精锐的重骑兵进行反冲锋，用自杀的方式赢得了富贵的撤退时间。这三千人是他最后的本钱，不过为了能多给匈奴留点血脉，他已经顾不上许多了，他乘着这三千铁骑发动决死冲锋的时候，带着周围能找到的残兵败将向北退去。
李息和李朔杀得性起，两人身先士卒，亲自带队冲在最前面，就在他们把匈奴人杀得节节败退的时候，一队匈奴人的重骑兵冲了过来，两人猝不及防，一头撞进了敌阵，等到二人的亲兵拼死把他们俩救出来的时候，两人都受了重伤。匈奴人的三千铁骑最后还是被汉军包围、歼灭，但他们拖住了李息和李朔的羽林、越骑两营人马，为且提侯的撤退赢得了富贵的时间。
赵能刚刚找到乌师庐的时候，汉军已经发动了最后的突击，他根本来不及撤出部队，只好下达命令后让大家自己寻找生路，他本人则带着一小队骑兵护着乌师庐追赶乌维去了。最惨的是句黎湖，乌维撤退时他并没有死，他当时被优势兵力的汉军围攻，所以根本没接到撤退的命令，也不知道别人都在逃命，他一面苦撑一面等待援军。等他发现别人都逃走的时候已经失去了最佳的突围时机，徐自为已经带人从中路包抄过来，句黎湖这才下令向北突围，可他在率部突围时死于乱军之中，所部骑兵只有千余人逃了出来，其余大多战死，少数投降。