六月初二下午，种師道受到崔詩、童貫、蔡攸、劉鞈等人的壓迫，不得已傳令於戌牌時分開始退兵。他做到一個老練的統帥在敵前退兵常識上應該做到的一切事情，他還根據在西北戰場上的經驗，準備了應急之用的白棓戰術。可是由於長期以來的士氣萎靡不振和連遭敗挫，由於退兵退得過於倉猝，由於那一夜反常劇變的氣候，風勢有利於敵方，由於耶律大石準備有素、深合機宜的追擊，使得种師道和西軍官兵所作的種種努力，盡付東流。這一支訓練有素、節制有方的勁旅遭到數十年以來極少有過的潰敗。
退兵的目的地是雄州，在敵軍追擊下，大部分潰兵四散逃走，不能夠按照原定計畫有秩序、有步驟地退入雄州。從東起霸州，西至安肅軍的漫長的戰線上，都有潰敗的零星的隊伍陸續退進城堡內或者處在郊外。還有一些人退得更遠，形成十分混亂的局面。
但是由於一部分西軍的拚命力戰，特別是种師中、姚平仲率領的秦鳳軍、熙河軍掩護撤退，收到一定的效果。由於白棓戰術在最後一擊中發揮了威力。由於遼軍的兵力有限（蕭干統率的奚軍不肯在這種反常的氣候中與契丹軍合力出擊），在過長的戰線中不能集中使用，也由於這種反常的氣候畢竟也給遼軍的追擊戰帶來很多的困難，耶律大石只能獲得有限的勝利，只能擊潰西軍，使它受到相當大的損失，而不能大規模地殲滅之，也不敢過於縱深地進行追擊。
西軍遇到霸州、雄州、安肅軍一帶後，利用遼軍一時不敢過於深入的機會，逐漸集合起來，憑著堅城，構築起新的防線。第一次伐遼戰爭就以宋軍從界河面前撤退幾十里到百餘里，兩軍在新的戰線上重新對峙而告終。