載灃何嘗不擔心袁世凱。在1906年的官制改革會議上，袁世凱堅持要設立責任內(nèi)閣，載灃至今都對袁世凱當時的猖狂勁記憶猶新。雖然老太后在前兩年已做先手，將袁世凱所轄的北洋新軍六鎮(zhèn)中的四鎮(zhèn)收歸陸軍部，去年又將他與張之洞一起上調(diào)為軍機大臣，但冰凍三尺，非一日之寒，豈能輕易動搖袁世凱的勢力？更何況，處置一個位極人臣的軍機重臣，必須要經(jīng)過軍機大臣們的同意，其所頒上諭也須有軍機大臣的副署才能生效，滿族親貴要誅殺袁世凱，談何容易？

正因為如此，載灃才不敢貿(mào)然而行。再三思慮之后，載灃和隆裕太后把首席軍機大臣慶親王奕劻請來商議，不料奕劻聽后立刻伏在地上，一言不發(fā)。在隆裕太后的厲聲質(zhì)問下，奕劻才囁囁嚅嚅地說，這事得和軍機重臣張之洞商量才能決斷。

載灃沒辦法，只好又召見張之洞。張之洞聽后，忍不住長嘆一聲。張是漢人大臣，年紀又大了，聽說要誅殺袁世凱，未免有兔死狐悲之感。他說：“國家新遭大喪，主上又年幼，當前為此穩(wěn)定的大局最為重要，此時誅殺大臣，先例一開，恐怕后患無窮。”他見載灃仍遲疑不定，便又說：“王道坦坦，王道平平。愿攝政王熟思之，開缺回籍可也”。

事實上，除了奕劻和張之洞反對誅殺袁世凱外，其他幾個軍機大臣也表示反對，比如那桐和世續(xù)，都是袁世凱的私黨，世續(xù)還暗地為袁通風報信。而在地方督撫中，端方是袁世凱的姻親，東三省總督徐世昌更是袁世凱多年的把兄弟。另外，英國駐華公使朱爾典也曾為袁世凱出面說情。這些人都構(gòu)成了阻止殺袁的重要力量。

據(jù)時人劉體智在《異辭錄》中的記載，宣統(tǒng)元年（1909年）的年末某日，在嚴辦袁世凱的流言聲中，袁世凱像往常一樣，迎著冰冷徹骨的寒風前往內(nèi)廷。載灃主政后，每日都要召集軍機大臣商議朝政。這一天，當袁世凱走到殿廷的時候，早被買通的當值太監(jiān)將他攔住，偷偷地對他說：“袁大軍機可不必入內(nèi)，今日攝政王怒形于色，聽說嚴懲諭旨即下，恐怕對袁大軍機不利，宜早籌自全之策。諭旨如何嚴峻，則非我輩所能得知?！?/p>

袁世凱聽后，猶如被打了一悶棍，在腦袋一片空白的情況下，失魂落魄地走回了自己家中。待到稍微清醒，袁世凱急忙把自己的幕僚和親信招來商議對策。親信張懷芝（也有說是袁克定）說，情勢危急，不如立刻前往火車站乘三等車前往天津，畢竟直隸總督楊士驤是我們的人。袁世凱聽后，立刻簡單收拾行裝，在張懷芝的保護下前往天津。

說起張懷芝，原是袁世凱的馬弁，一次閱操中，袁世凱不慎落馬，張懷芝急步上前，一手按住馬頭，另用頭頸和肩膀扛住墜馬的袁世凱，袁這才避過一難。由此，張懷芝被袁世凱認為忠誠可嘉，后來也一步步做上了鎮(zhèn)統(tǒng)制并在民國后當上了山東督辦，這是后話。

為防不測，袁世凱不敢到天津本站下車，而是提前一站讓張懷芝給楊士驤打電話，讓他派人來接。楊士驤倒還鎮(zhèn)定，他讓袁世凱萬不可來督署，萬不可讓人看見，他隨后就派人處理這事。

袁世凱正在生悶氣時，楊士驤的親信來了。他帶來了北京的消息，說“罪只及開缺，無性命之虞”。袁世凱聽后長舒了一口氣，便決定立刻回京，預備明晨入朝謝恩，不然會引起更大的麻煩。

當時北京的袁府更是陷入了慌亂當中。袁世凱失蹤的消息在城中不脛而走，一時間謠言紛紛，有說袁世凱被秘密處死的，也有說袁世凱畏罪自盡的，一時間紛紛擾擾。直到后來，主持軍機大政的張之洞聽說袁世凱已經(jīng)回來的確切消息后，心里的一塊石頭才算落了地。

事后，老張忍不住對左右調(diào)侃道：“人家都說袁世凱不學無術(shù)。我看哪，他不但有術(shù)，而且是多術(shù)，你看他這次倉皇出走，能找的地方都找遍了，誰能知道他躲在哪里？我現(xiàn)在算是知道什么叫‘術(shù)’了?！?/p>

第二天，袁世凱終于見到了那道上諭：“內(nèi)閣軍機大臣外務部袁世凱，夙承先朝屢加擢用，朕御極復予懋賞，正以其才可用，俾效驅(qū)馳。不意袁世凱現(xiàn)患足疾，步履艱難，難勝職任。袁世凱著即開缺回籍養(yǎng)疴，以示體恤之至意?！?/p>

三天后，袁世凱懷著無比的委屈和幽怨，帶著他的姨太太和親信們，孤獨而凄茫地離開了北京。袁世凱被排擠出京后，清末政壇再次發(fā)生或大或小的地震，袁世凱的私黨一個個被清除：楊士驤當年去世，端方接任直隸總督；張之洞去世；郵傳部尚書陳璧被革職；徐世昌內(nèi)調(diào)郵傳部尚書，東三省總督由錫良接替；黑龍江布政使倪嗣沖被查辦；民政部侍郎趙秉鈞被斥，載灃接管警政；江北提督王士珍自請開缺，等等。

清末有這樣一個說法，說“張之洞有學無術(shù)，袁世凱不學有術(shù)”，張之洞固然是忠厚老者，他和袁世凱的關(guān)系也不算太好，但在關(guān)鍵時刻，他的話實在是寬仁厚道的長者之語，不管他是為了大局著想或是其他，卻在無意中保護了袁世凱。

至于袁世凱，他雖然混跡官場近30年，不但“有術(shù)”而且“術(shù)”還挺多，但在皇權(quán)體制下，當他從慶王府聽到“將對袁不利”的消息后，何嘗不慌張？這時的他，也是惶惶然如喪家之犬，無計可施矣。

再強的人，也有落難的時候，攝政王載灃當政的這幾年，恐怕就是袁世凱最艱難、最危險的時候吧。