“你這個廢物！”貴由指著兀良合臺怒罵道：“我給了你五萬大軍，不過一天的功夫，你就給我損失了近萬人，我要你何用？”
李牧發起夜襲，但自帶的人手太少，而司馬尚因道路原因，並未能大規模突襲元軍，元軍被夜襲只是驚慌而逃，並沒有被漢軍大規模斬殺。兀良合臺逃走後收攏殘兵，統計了一下，還有四萬餘人。相比於鐵木真被夜襲，一天後，十萬大軍盡滅，兀良合臺算是很有能耐了。
兀良合臺很想懟回貴由，但此事事關先帝的名聲，所以沒有吱聲。
貴由見兀良合臺表情，繼續罵道：“怎麼？你還不服？來人，給我把兀良合臺拖下去，仗責二十！”他是真發火了，這才幾天的功夫，己方就損失近四萬人，這仗還打不打了？
蒙哥、忽必烈等人連忙求情，因為兀良合臺算是元軍目前為數不多的大將了，不能因此而傷了人心。
尤其是伯顏，他之前就認為李牧是一員良將，面對這樣的對手、雄關，本就應該重視起來，但卻因為貴由的輕視，才釀成如今的損失，最終讓兀良合臺來背鍋，真的會讓大將離心的。
貴由大怒，堅持要責罰兀良合臺，親兵立即將兀良合臺押下去仗責。
兀良合臺被打，心中更加不服，便有了率部脫離貴由麾下的念頭。
貴由看了一下底下的大臣問道：“阿術，明天由你率軍攻打雁門關。”他打算在雁門關死磕到底，一定要殺光雁門關的漢軍，方能消心頭之恨。“
”陛下，萬萬不可“伯顏再次勸道：”兀良合臺的大敗已經說明李牧此人的本事很不一般，我們再攻，只會增加損失，我們的兵員再這麼打下去可就真的要被耗光在雁門關這裡了！“
蒙哥亦道：”陛下，此戰我們不但損失了近萬士兵，上百架回回炮亦被丟失了。想再做這麼多回回炮，恐怕要花了近半個月，天氣過兩天就下雪了，到時道路更不好走，我們還是另想辦法為好。“
忽必烈等人亦出聲反對，堅持不願再對雁門關用兵。
貴由氣道：”那你們說怎麼辦？“他沒想到自己的決定遭到一大群的反對，亦不敢堅持己見。
伯顏道：”趙遷剛剛坐上幷州之主的位置，李牧立此大功，定然會遭到趙氏族人的眼紅。我願意入幷州遊說趙氏族人，一定會將李牧給除掉！“
貴由沒想到伯顏這次敢打這麼大一個包票，問道：”你有幾成把握？“
伯顏應道：”昨天之前有五成、今天有七成。“
貴由一聽，覺得兵不血刃地殺了李牧還是可以的，便同意了伯顏的請求。
蒙哥繼道：”陛下我們目前人口不斷減少，定襄郡就有數十萬的金人，雖然青壯很少，但我們還是可以收為已用的。“他想把金國的人口都納入元朝之中，只需過個幾年，就都是元人了。
忽必烈亦贊成道：”我同意，金軍兵不滿萬，那幾十萬婦女根白給一樣，我們帶軍去溜個彎的功夫，就能全力帶回來。“
貴由卻有自己的小算盤，他可不想把金國的那些人口分的太散，想著就給自己跟一些親信，於是宣佈親自率軍前往攻擊。如此到時俘虜的人口就可以大部分佔為己有了。
蒙哥、忽必烈當然知道貴由的心思，卻也不好反對，只好出聲贊成。