嶽飛在這裏積極準備打敗金國，恢複中原。而那邊，秦檜卻想著以淮河為界和金國議和，把淮河以北的地區都送給金國。他暗示諫官向高宗皇帝上奏要求班師回朝。嶽飛上奏說：現在金兵的銳氣已經喪失殆盡，輜重全部丟棄，倉皇渡過黃河。而且豪傑都向著朝廷，士兵都非常拚命的戰鬥，這樣的時機不能再有了，不要輕易失去。秦檜知道嶽飛意誌堅定，不可能回來的，就先請走高宗下詔讓張俊、楊沂中等人先班師，然後再以嶽飛孤軍深入，不可久留的理由，懇請高宗下詔命嶽飛班師。高宗聽從了秦檜，一天之內，就發了十二麵金字令牌，命令嶽飛回朝。
嶽飛接到十二麵金牌，知道不回是不行的，憤然而惋惜的哭泣說：十年的心血，今天全毀了。
嶽飛班師，百姓攔住嶽飛的馬頭痛哭說：我們幫宋軍運送糧草，金國的人全都知道的。今天相公去了，我們就沒有生路了。嶽飛也很悲傷的流下了眼淚，拿出高宗的詔書給百姓們看，並且說：我不能擅自留在這裏。百姓聽到這個話，痛哭的聲音震動四野。嶽飛決定再留五天，用來保護百姓們向南遷移，跟隨嶽飛南遷的百姓就像集市人群那樣。
等到嶽飛班師，所取得的那些州縣馬上就又失去了。
當時有的是愛國將領，就像嶽飛那樣，隻是沒有好的宰相和皇帝，最終沒有能恢複中原。
紹興二年，曹成用兵十萬作亂，從江西一直到了湖湘，占領了道州和賀州。高宗命嶽飛暫時到潭州，兼管荊湖東路安撫都總管，並且授予了金牌、黃旗招撫曹成。曹成聽到嶽飛快要來了，吃驚的說：嶽家軍來了。當即分兵多路套破了。嶽飛到了茶陵，就拿出高宗的詔書，想要招安曹成，曹成拒絕了。嶽飛就上奏高宗說：這麼多年朝廷對遭賊的策略就是招安，所以盜賊強盛的時候就作亂，勢力弱了就招安。還不如一舉把他們剿滅了，以警告不停起來作亂的人。高宗準了嶽飛的請求。
嶽飛到了賀州，抓住了曹成的間諜，幫在了大帳大外麵。嶽飛走出大帳詢問軍中的糧草，管理糧草的小吏說：糧草沒有了，怎麼辦？嶽飛故意說：那就暫時返回茶陵吧。說完，用失落的表情看了間諜一眼，痛苦的進入了大帳。進入大帳後，嶽飛悄悄的命人讓間諜逃走。
間諜逃回曹成那裏後，把見到的情況告訴了曹成。曹成非常高興，準備第二天就帶領人馬來追擊嶽飛。這邊嶽家軍就在床鋪上吃了飯，悄悄的繞過山嶺，在天亮之前，就到達了太平場，打破了曹成的砦。曹成依仗著先要地形抵抗，嶽飛帶著士兵勇猛的衝擊，曹成大敗，退到了北藏嶺、上梧關。
嶽飛到了北藏嶺、上梧關。曹成派遣將領出來叫戰，嶽飛不等曹成的部隊擺好陣勢，直接擊鼓命令士兵進攻。士兵奮勇爭先，奪得了這兩個關口的險要地方。曹成又在桂嶺設置了砦到北藏嶺，連接起來控製道路。嶽飛率領八千部下，在第一次擊鼓後，就已經登上了北藏嶺，大敗了曹成的兵馬。曹成隻好退到了連州。。嶽飛對部將張憲說：曹成的黨羽已經散去，追擊上去殺掉他們。被他們威脅隨從的人情有可原，但是放了他們又有可能會變成盜賊。現在派你去殺他們的首領，安撫他們，千萬不要亂殺人，連累主上因此喪失了保護百姓的仁政。於是，張憲從賀州、連州，徐慶從邵州、道州，王貴從郴州、貴州招降了兩萬人，和嶽飛在連州會師。嶽飛繼續進兵追擊曹成，曹成迫於壓力，向宣撫司投降。
曹成有一個非常勇猛的部下名叫楊再興，被張憲等人追擊跳入了山澗之中。張憲向要殺了楊再興，楊再興說：你把我捉去見嶽公吧。張憲就把楊再興綁了以後去見嶽飛。嶽飛見到楊再興，非常驚奇他的相貌，命人給楊再興鬆綁說：我不殺你，你應該用忠義來報銷國家。嶽飛的話感動了楊再興，楊再興叩拜以示感謝。
原來，嶽飛在莫邪關的時候，第五將韓順夫解下馬鞍，脫去盔甲，把擄來的婦女叫來陪酒，在營中取樂。楊再興率領他的部下直接殺到韓順夫的營裏，毫無準備的官軍被楊再興的勇猛嚇住了，紛紛後退。楊再興趁勢殺了韓順夫。就在這個時候，嶽飛的弟弟嶽翻出來迎戰，不敵楊再興，也被楊再興殺了。
嶽飛為國用人，放棄前仇，義釋了楊再興。楊再興深深感激。後來，嶽飛屯兵襄陽，想要收複中原地區，派遣楊再興到西京長水縣的業陽。楊再興在業陽殺了孫都統和統製滿在，俘虜將領官吏一百人。第二天，在孫洪澗交戰，大敗張邦昌成立的偽齊政權兩千人馬，收複了長水縣，得到的二萬石糧食分給了百姓和軍隊。西京的險要關隘被收複，又得到了偽齊政權遺留的戰馬一萬匹。中原地區積極響應，楊再興到了蔡州，又燒掉了偽齊軍隊的糧食。
嶽飛在郾城大敗金國的軍隊，兀術非常生氣，集合了龍虎大王、蓋天大王和韓常的兵馬逼向嶽飛。嶽飛派遣自己的兒子嶽雲抵擋敵人。雙方激戰了數十個回合，敵人支持不住，楊再興單槍匹馬衝到敵人的陣營裏，想要活捉兀術，親手殺死了數百人，隻是沒有抓到兀術。兀術認為這是很大的恥辱，集合力量再次重來，屯兵十二萬在臨潁。