岳飛最後明白到，朝廷不允許抗金軍事行動成功，於是只好班師回朝。在撤軍途中，岳飛問將士：「天下事竟如何？」張憲說：「在相公處置耳！」可惜岳飛未能擺脫忠君思想的束縛，最終作出退兵的抉擇。退兵使京西人民大失所望，攔馬痛哭，岳飛含淚出示詔書，說：「吾不得擅留！」他把願意南下的百姓安置在襄漢六郡，自赴臨安覆命。不久，已經收復的河南、關西大片土地又重陷敵手。