1945年初，蔣介石突然下達了“撤去主持中統15年的特務頭子徐恩曾本兼各職，永不錄用”的手谕。對于徐恩曾的失寵，很多人感到困惑，中統局一度人心慌慌，甚至連工作無法開展。這背後的原因并不複雜，是徐恩曾的一些所作所為引起了蔣介石的嚴重不滿。
事實上，在1941年之前，蔣介石一直認為徐恩曾的工作能力不錯，但後期軍統的特務活動卻遠超中統，因為徐恩曾不像戴笠那樣，願意集中精力始終如一地将間諜工作視為自己的責任。
1941年徐恩曾被任命為交通部次長，同時兼任中統局長。蔣介石特地召見徐恩曾，語重心長地告誡他“我命你擔任交通次長，是為了讓你可利用交通部次長的職務便利，加強中統在鐵路、公路、船舶、飛機等系統的間諜工作，建立一個系統而全面的偵查網絡。”
但徐恩曾後來卻忘記了蔣介石的囑托，并試圖利用中統的力量往上爬。在徐恩曾内心深處，他憎恨特務部門的黑暗，一直想公開露面。在當上交通部次長後，徐恩曾到處結交人脈，為競選經濟部長作準備，忽視了特務活動，導緻中統工作充滿漏洞。
蔣介石得知後很不高興，認為徐恩增不聽指揮、工作不當。衆所周知，徐恩貞是在陳果夫、陳立夫兄弟的幫助下才當上了中統頭目，他自然很感激陳氏兄弟。然而，為了當上經濟部長，徐恩曾卻逐漸疏遠陳氏兄弟，他與國民黨中央秘書長吳鐵成交好，并在吳鐵成的推薦下獲得了交通部次長的職位。
雖然陳氏兄弟對徐恩曾當交通部次長一職表示不滿，但他們同時認為這将有利于間諜事業的發展，是以暫時保持了沉默。
當徐恩增又争取經濟部長一職時，引起了陳氏兄弟的憤怒，因為陳立夫恰好想謀求經濟部長一職。當陳氏兄弟看到徐恩曾與他們的利益産生沖突時，他們便不在蔣介石面前再替徐恩曾說話。
而且，徐恩曾自己是個好色之徒，他有兩個妻子。後來還愛上了一位相貌出衆、多才多藝的女學生，名叫費俠，費俠早年留學蘇聯，在蘇聯期間，她加入中國共産黨。留學歸國後，費俠在中共上海機關工作。1931年顧順章被捕後叛變投敵，費俠也被捕，在顧順章的說服下，費俠随即叛變投敵。
如果徐恩曾隻是簡單的同費俠交往也就罷了，但她非要堅持同費俠婚。負責國民黨黨務和中統工作的陳氏兄弟一緻認為徐恩曾此舉不對，他們擔心費俠的叛徒身份，會對中統特務工作産生不利。是以，陳氏兄弟勸徐恩曾以事業為重，不要迎娶費俠。
沒想到，徐恩曾已與費俠愛的死去活來，他甚至對陳氏兄弟說：就算不做中統的頭目，他也要和費俠結婚。
陳氏兄弟别無選擇，隻能向蔣介石報告。蔣介石也認為這件事非同小可，如果費俠假意投降，那麼他無論如何都不能娶費俠，于是召見徐恩曾問：“你能確定她沒有問題嗎？”
徐恩增堅持說沒有問題。蔣介石見他态度堅決，隻好答應他們的婚事。與費俠結婚這件事，徐恩曾已經忤逆了蔣介石的意志，蔣介石逐漸對他越來越不信任。接下來發生的三件事，徹底令蔣介石放棄徐恩曾。
一是，在國民黨某次重要的會議期間，中央黨部竟然出現了“總裁獨裁，中正不正”的智語，徐恩增追查了許多天，沒有查出原因，隻好去找老蔣介石道歉，蔣介石被激怒了，認為中統做事太不給力。
二是，1943年冬，一直與中統有沖突的軍統，将徐恩曾的第二任妻子王素清在成都從事高利貸、殺人等非法活動密報給蔣介石。随後，蔣介石在進階别會議上痛斥徐恩曾“你應該受到處分”，這是借徐恩增妻子違法行為對徐恩曾再一次敲打。
三是，1944年4月，蔣介石在其親自主持的軍、警、憲、特進階情報彙報會上，要求中統介紹下八路軍在敵後的武裝發展情況。由于徐恩曾事先沒有充分準備，在會上支支吾吾，根本回答不清楚；相反，戴笠則準備得很充分，将八路軍武裝情況彙報的明明白白。蔣介石勃然大怒，嚴厲批評了徐恩曾。
在徐恩曾接二連三不斷失職的情況下，蔣介石終于下達了那條免去他所有職務的指令，轉而大力重用戴笠。
被老蔣免職後，徐恩曾利用自己的經商天賦，把投身商場，很快富甲一方。
不過頗具諷刺的是，戴笠于1946年3月墜機身亡，全身燒焦；而成為富商的徐恩曾去台後于1985年離世，得以善終。真可謂，塞翁失馬，焉知非福！