對於高懷遠受到的這樣的處置，立即引起了輜重營上下的一片不滿，在眾多人眼中，高懷遠這一次受到的處置實在有失公允，讓不少人差點站在襄陽大營裡面罵娘。
幸好有周昊等人的壓制，這幫鄉兵們才總算是沒有鬧出什麼大事，因為周昊提前接到了高懷遠託人送回來的指令，讓他們不得因此鬧事，省的再惹出什麼麻煩來。
待到高懷遠背上血跡斑斑的趴在車上被人送回輜重營的時候，周昊等人得知高懷遠捱了二十軍棍，差點氣瘋了，咬牙切齒的將高懷遠接入營中，張羅著為高懷遠傷藥療傷。
“不必了！我身上沒什麼事情！”當看到送自己回來的那些人走後，高懷遠立即從床上蹦了下來，攔住了正要為他上藥的周昊，對身邊的這些少年們說到。
“這個趙大人真是個混蛋，少爺天天為大宋出生入死的，結果不但不給予獎賞，卻還杖責少爺，人們還說他是個清官，我看他根本就是個昏官……”看著高懷遠血跡斑斑背部，周俊站在帳中氣的鼓鼓的，忍不住開口便罵了起來。
高懷遠立即伸手攔住了正要附和周俊罵聲的手下弟兄們，搖頭道：“此事怪不得趙大人！你們休要再怪他了！只是我這次殺周縣尉，得罪了朝中的小人，趙大人也不得不作出讓步，其中有許多緣故，現在還不便給你們道來，我身上的傷沒事，你們下去開始收拾東西，回頭交接一下之後，估計我走之後，輜重營也會就地解散，你們也先提前準備一下！”
高懷遠雖然如此一說，周昊還是不放心高懷遠的傷勢，非要檢查一下他被杖責過的脊背不可，高懷遠無奈的掀開了衣服，眾人看到高懷遠厚實的脊背上只不過微微有些紅腫，看上去確實沒受什麼傷，這才放心下來。
他們都不是傻子，二十軍棍數量雖然不多，但是如果打實了的話，高懷遠即便皮糙肉厚，也扛不住著二十軍棍，鐵定被打得皮開肉綻，如果身體弱一點的人，挨實了的話，小命丟不保都有可能。
而現在看來，高懷遠身上一點事情都沒有，便說明行刑的人定是在行刑的時候故意放水了，所以高懷遠才能捱了打之後，一點事情沒有，於是眾人這才稍稍消氣了一些。
但是對於免去高懷遠輜重營指揮使一事，眾人還是想不通，不肯按照高懷遠的吩咐去做，畢竟他們一起出生入死時間已經不短了，這麼突然間離開輜重營，眾人感情上都有些接受不了。
高懷遠無奈之下，只好坐下，讓人守住門口，對眾人說道：“這件事其實怨不得趙大人什麼，可以說還要感激趙大人，如果不是趙大人維護於我的話，這一次的事情我恐怕不會這麼輕易便能度過！
沒想到那個周縣尉家中居然有個親戚在朝中為官，而且似乎是當朝權相史彌遠的手下，現在人家非要治罪於我，換成其他人的話，向我這樣的芝麻綠豆般的小小指揮使，趙大人大可不管，將我交給那姓錢的處置便是，最終估計我肯定是難逃一死，而現如今趙大人頂著壓力，只是輕描淡寫的如此處置，已經算是對我的關照了！
現在雖然兩軍在棗陽一帶打得歡，但是我們對於戰局來說影響不大，說難聽點咱們現在只能還算是一支偏師，算是年三十抓的兔子，有咱過年，沒咱也照樣過年！
而且對於免去我指揮使一事，也是我自己提出來的，正好回去避避風頭，省的給趙大人繼續添麻煩，何況現在我們來這裡已經將近一年時間了，即便按照常理，也該輪換一下了，我想回大冶縣看看，畢竟咱們臥虎莊還有許多事情要做！
至於離開這裡，我想問一下你們的意見，大家有誰想留在這裡的，或者是願意跟我一起回臥虎莊，現在可以說出來，我不會強求大傢什麼的！
假如你們願意留在軍中效力的話，我會將你們安排到孟珙手下聽差，保證不會讓你們在軍中受氣便是，如果不想留在這裡的話，那麼便跟我一起回臥虎莊去！”
高懷遠話音一落，周昊想都沒想馬上便帶頭說道：“我跟你回去！這鳥地方實在讓人憋屈，好人沒好報！我才不留在這裡呢！”
“小的也跟少爺回去！”周俊隨即跟著周昊便出言說道。
“小的也跟少爺回去……”當聽罷了周昊和周俊二人的話之後，站在高懷遠軍帳之中的那些臥虎莊出來的少年們紛紛答道，態度相當堅決。
這一次高懷遠的遭遇，顯然有些冷了眾人的心，長久以來，他們早已習慣服從於高懷遠，已經潛移默化的形成了只對高懷遠效忠的思想，至於什麼報國之類的想法根本一點沒有，何況他們之中大部分人還都是北方逃難過來的，所以更加對大宋沒有什麼感情，早已將自己視為臥虎莊的一員，高懷遠去哪兒他們便去哪兒。
高懷遠其實這句話也知道是白問，不過他還是想趁機檢驗一下這些人對自己的忠誠度到底如何，有沒有人想趁機脫離臥虎莊自立出去，現在看來他得到了相當滿意的答案，本來嘛，他當初收留這些少年，便是要組建一個完全效忠於他自己的班底，長久以來他也在悄然的給這些人灌輸這種思想，這些人看他要回臥虎莊，自然沒人願意留在這裡，跟著別人做事了！
但是高懷遠卻沒答應讓這些人都跟自己回去，因為雖然他不願投入軍中為大宋效力，但是並不代表他就完全要放棄好不容易和孟珙這樣的名將建立起來的關係，一旦將這些人全部帶回大冶縣的話，等於徹底又放棄了錘鍊他們的機會，所以這兩天之中，高懷遠早已打定了主意，即便他離開軍中，也要留下部分人手，繼續在孟珙手下效力。
這麼做的原因無他，只是高懷遠想在軍中留下一點力量，一是可以繼續讓自己的人在軍中歷練，讓他們成為更加合格的軍官，並逐步在軍中掌握一些實力，方便以後自己的行事，二是開啟一道方便之門，讓後續臥虎莊的少年們有一個再來軍前歷練的機會，既然他想要做一番事業，眼光就必須要放遠一些，所以才會如此安排。
整個事情處理的很快，三天之後，高懷遠便完成了手頭各種事務的交接工作，將輜重營也因為高懷遠的離職，宣告瞭解散，營中六百多鄉兵們，各自回到了原來的地方，一支小有名氣的鄉兵輜重營，就此從襄陽大營消失。
當高懷遠帶著周昊等十來個少年離開襄陽的時候，黃嚴領了剩下的將近二十個少年哭的一塌糊塗，站在襄陽城外送別高懷遠。
這一次經過高懷遠的勸說之後，黃嚴極不情願的被他留在了這裡，負責帶領選出來的這十幾個少年，奔赴棗陽孟珙那裡投效孟珙，因為高懷遠知道，孟珙將會在以後相當長時間之內，平步青雲，成為南宋歷史上有名的大將，將黃嚴等人留給他，高懷遠也放心一些，而且這幫少年們只要用心，絕對能在軍中站住腳跟的，這對於他以後的發展，可能會成為一支重要的助力！