“不行不行，朝中現在我也只有你和鄭清之幫著朕了，你如何可以一下離去這麼長時間呢？祭祖雖然是件大事，但是不妨讓你父親回去好了！眼下趙竑尚未歸案，隨時都可能會鬧出事情，你還是留在京師我更放心一些！”趙昀一聽就不幹了，不答應高懷遠的請假，不讓高懷遠離開。
高懷遠嘿嘿陪笑道：“陛下！且聽微臣說來，微臣這段時間在殿前司來了個大清洗，雖說並非我一人所為，但是殿前司的事情還是引起史黨的注意，覺得我更換人員太多了一些，臣現在不得不暫避一下，躲開這個風頭！
何況現在陛下也是在韜光養晦之中，儘管放手讓史黨折騰吧！待到微臣從大冶回來的時候，自會有辦法對付這些賊黨的！
眼下雖然濟王沒有落網，但是料想趙竑再想掀起什麼大浪，也早已不可能了！朝中有鄭大人他們在，也沒什麼好擔心的！
自從微臣到了臨安之後，已經數年未曾回鄉，也權當陛下讓微臣放鬆一下如何？”
高懷遠告假提前已經和鄭清之打過招呼，鄭清之也出面幫高懷遠說話道：“陛下，高殿帥說的不錯，這段時間殿前司動靜確實太大，讓他暫且離京避避風頭也好，離開了京師這個漩渦之後，朝中對於他的非議自然會少一些，微臣再從中間斡旋一下，待到高殿帥回來之後，自然也就沒事了！
至於濟王的事情，聖上也大可不必擔心，眼下陛下已經在全國發出海捕文書，懸賞通緝濟王，他豈敢犯險再出來作亂呢？以微臣看來，濟王眼下可能已經遠走他鄉，改頭換面避入深山躲起來了，即便不落網，恐怕也不敢露面了！”
趙昀一聽他們的話，這才不情不願的答應了高懷遠的要求，想想高懷遠這些年幾乎寸步不離他左右，還替他遮風擋雨又推他登基，也該讓他休息休息了，眼下他已經是三品大員了，官品還超過了他的老爹，回鄉風光一下也是應該的，故此趙昀也不再反對，準了高懷遠兩個月的假期。
高懷遠出宮之後，少不得又去史彌遠那裡告辭一下，史彌遠也說道：“你暫避一下也好，殿前司你折騰出來的動靜太大，老夫沒想到連梁成大也幫著你，朝中眼下確實對你非議頗多，你這次回鄉祭祖，也正是時候！
至於京師裡面的安全，你提前安排妥當，莫要出事的時候找不到合適的人來替你做事！你安排好這些，便儘可離去！”
“請相爺放心，這次回鄉祭祖也乃是父命，下官眼下正好也避避風頭，還望相爺這段時間能幫下官處理一下朝中非議之事，至於京師的安全，只要護聖軍在，有華嶽、趙府堂他們在，可確保無事！下官也已經給他們吩咐過了，相爺只要有用得著他們的地方，大可只管吩咐便是，他們定會以相爺馬頭是瞻！這次懷遠回來，定要給相爺尋一些藥物，好好調理調理身體！”高懷遠陪著笑臉對史彌遠說道。
史彌遠對上次警告高懷遠之後，保皇派的收斂感到很高興，於是揮手讓高懷遠離去，並且著令吏部派出官船，送高懷遠回鄉，也算是給高懷遠個大面子，讓他回鄉風光一下。
第二天一早，高懷遠便登上了一條吏部為他派出的大型官船，辭別了送行之人離開了臨安，沿著大運河開始了他的返鄉之旅。
而隨行的人員包括了二百殿前司侍衛，而且柳兒也一起隨船返鄉，一共分乘三條大船，浩浩蕩蕩的好不威風。
當眼看臨安碼頭消失在了視野範圍之後，李若虎過來對高懷遠說道：“大人，船上的船伕已經換乘到了另外兩條船上，這條船用的都是自己人，可以說話方便一些了！”
高懷遠微笑著點點頭，帶著他們一起進了船艙，在船艙裡面赫然坐著一人，正是史彌遠的老對頭紀先成。
“你這個傢伙實在太膽大了，居然在臨安就敢讓老夫登上你的船，難不成不怕史彌遠發現老夫不成？”紀先成看到高懷遠便笑了起來。
高懷遠晃著腦袋道：“不怕不怕，我早已安排妥當了，何況即便現在紀先生走在臨安的大街上，恐怕也沒有幾個人能認得出紀先生您了！一晃這已經十幾年過去了，紀先生比起早年變化頗大，誰還會一直記得當初直言彈劾史彌遠的您呢？”