許久之後，嶽飛才抬起頭來，看看眾人似有喪氣之意，便笑著說道：“如此甚好，所謂大浪淘沙，去偽存真，這次看似秦檜將我嶽家軍上下清洗一遍，使我等將士離心，分崩離析，但若是換個思路來想，這也未嘗不是我想要的結局。我嶽家軍經曆多番大戰，俘敵無數，除了背嵬軍外，大多軍士原本都是俘虜，雖然陳淬將軍訓練有方，看似勢大，但卻與我心中的精銳相去甚遠。至於其他將官，大多是懼我威勢，故而托庇於嶽家軍中，離軍自尋出路者不必多說，似那些投身於賊者，若非這一番事，又如何能冒出頭來？所幸此時以身許賊，否則他年我成大事時，這些若是背後給我一刀，豈不更是令人痛楚？如今雖然隻得數千人馬，但來者皆是忠心耿耿之人，正當大用。”
一旁的柴桂聽後讚道：“嶽賢弟胸懷，為兄實不能及，這般結果，被你一說，卻好似秦檜等賊乃是為你去除軍中毒瘤一般。”
嶽飛笑道：“所謂不破不立，嶽家軍上下正像如今的朝廷一般，雖然表麵無事，但暗中卻是存有隱患，若是不能痛下決心，隻怕最終難成大事。雖說如姚政、董先等人隨我多年，此番投賊，確實令小弟心痛，但這些人並非不可取代，至少各軍正統領未有一人投賊，這卻是令小弟十分欣慰。況且事已至此，徒自惋惜亦是無用，反不如好生蟄伏於此，再圖大計。”
柴桂聞言點點頭道：“以賢弟之才，如今乃是潛龍入淵，待得天變之時，必是勢不可當。”
嶽飛搖搖頭笑道：“兄長過譽了。”隨後又對高寵與何元慶說道：“你二人先去清溪山紮寨，等施全率領工匠到後我便讓宗本前去好生安頓，我暫且不便出麵，便在城中等待消息。”二人領命出城，往山上駐紮不提。
十數日後，施全率領工匠與踏白軍也來到南寧州，上了青溪山安頓，張憲受嶽飛將令，上山統禦大軍，施全與武琛則入城與嶽飛相見。
施全將何元慶所言之事又細說一番，更將朝中變化也說與嶽飛聽，嶽飛聽後亦是不住歎息，隻是派施全繼續與各處踏白軍斥候聯絡消息，並於青溪山上組織工匠開工。
而此時朝廷之中的變化更是令人瞠目結舌，原來在嶽飛離去不久後，高宗皇帝以賞柘皋大捷為由，升張俊和韓世忠為樞密使，實則是要剝奪二人軍權。
張俊深明高宗皇帝之意，不惜委身於秦檜，自請納宣撫司兵權，使得高宗皇帝龍顏大悅，對其更為親近。
此時嶽飛已去，秦檜的眼中釘便隻留下韓世忠一人，於是在其主張下，朝廷命張俊前往淮南東路措置戰守。雖然詔諭中寫道“方國步之多艱，念寇讎之尚肆”，“當今行陣之習有素，戰守之策無遺，伐彼奸謀，成茲善計”，但實際上張俊此行，卻是帶著秦檜的重大任務而來。
原來在張俊離開臨安時，秦檜便曾與其暗中會麵，授意張俊去往楚州後一要羅織韓世忠的罪狀，構陷冤獄，二要打散韓家軍，命其將駐地由楚州，撤往鎮江。張俊此時專一諂媚，知道秦檜如今乃是天子寵臣，自然無不應允。
之所以秦檜對韓世忠如此憎惡，實是因為其與嶽飛一樣，一力主張與金國大戰，並且在上一次和議之時，韓世忠更是命部屬假扮賊軍，企圖襲殺金使張通古，破壞和議。此事雖因其麾下告密而未能成功，卻著實使秦檜嚇出一身冷汗。要知道當時秦檜乃是完顏撻懶布在大宋的一條暗線，此時完顏撻懶正當權，極力主張和議，秦檜則從中推波助瀾，一旦韓世忠襲殺金使之事成為事實，那無疑是對和議一事極大的破壞，到時隻怕完顏撻懶怪罪下來，秦檜亦不好受。因此，秦檜對於韓世忠的憎惡，更不在嶽飛之下。
而除了張俊一路外，秦檜趁著韓世忠在臨安供職之時，早已使人在韓世忠軍中物色到一條走狗，此人便是淮東總領胡紡。