經過十多年的勞動改造後，1959年12月,杜聿明被特赦。走出功德林後，杜聿明被任命為全國政協文史資料研究委員會專員，國家給他提供了住房，他還能享受到和其他政府進階幹部一樣的待遇，他過上了正常人的生活，日子越來越有盼頭。
1963年6月3日，杜聿明又迎喜事，在各方協助下，他的妻子曹秀清從萬裡之外的美國回到祖國大陸，杜聿明與妻子在分别多年後終于得以團圓。
在那段時間，與杜聿明熟識的人見到他都紛紛向他表示祝賀，祝賀他與妻子的幸福團聚，杜聿明總是禮貌地表示感謝。但細心的人卻發現，杜聿明似乎并不開心，他悶悶不樂好像有很多心思。
其實，這時的杜聿明内心中可謂五味雜陳，妻子曹秀清回到他身邊後告訴他的兩件事，令他夜不能寐，又怒又悲。
杜聿明怎麼了？是什麼讓這位見過無數大場面的前國民黨将軍耿耿于懷呢？
今天我們就來聊一聊這段曆史。
妻子告訴杜聿明，蔣介石薄情寡義
有道是小别勝新婚，杜聿明與妻子曹秀清可謂是大别，從1948年6月他被蔣介石任命為徐州“剿總”副總司令兼第二兵團司令官，走上内戰之日起，他就與妻子家人分開。十多年來，他無時無刻不期待着與妻子家人相聚的這一天，如今終于見到了發妻，在交談中妻子告訴杜聿明：他被俘後，他的生與死，家人們一無所知。她曾向國民黨當局打聽他的下落，得到的回答是：“杜将軍被共産黨殺害了！”這個回答曾使曹秀清瀕臨崩潰。
曹秀清說，1949年5月初，上海即将解放時，家裡來了一位不速之客，這個神秘來客帶來了一份蔣介石的手谕，蔣介石在手谕中要求曹秀清攜其子女必須乘國民黨最後一架離滬的飛機飛往台灣，蔣介石還許諾到台後将保證全家人的生活和子女的學費。
在不知杜聿明究竟是死是活、今後的生活又無着落的情況下，曹秀清隻好按着蔣介石的吩咐，帶着自己的公婆和5個兒女來到了台北。
到台北後，國民黨當局給的一點可憐的補助金成為全家的唯一的生活來源，但這點錢根本不夠維持一家老小的日常開銷。迫于無奈，曹秀清隻好外出打工，她好不容易找到了一份收發的工作，但微薄的薪水難以改變全家的生活困境。
曹秀清曾找過宋美齡、張群等人反映自己的處境，但敗軍之将的家人無人理睬。
杜聿明的長子杜緻仁于1947年去美國留學，由于家庭無力提供學費，不得不從台灣一家銀行貸款，留學三年已負債七千餘元。
為還貸款和賺取生活費，杜緻仁白天上學，晚上給人打工，常常饑一頓飽一頓，生活十分艱難。
眼見還有一年即将畢業，可銀行突然中斷了貸款，杜緻仁被迫辍學。無奈之下杜緻仁給遠在台北的母親寫信，在信中哭訴說還需三千元即可領取畢業文憑，希望得到母親的幫助，
曹秀清得知大兒子的窘境後萬分焦急，她想幫助兒子擺脫困境，可實在有心無力，萬般無奈之下，曹秀清想起了蔣介石當初的承諾，思考再三後，曹秀清鼓足勇氣向蔣介石提出了補助三千元以給長子交學費的申請，請蔣介石看在杜聿明曾為國民黨立過戰功的份上予以準許。
半月後，蔣介石批複：準借一千元，分二年支付。
得知蔣介石的批複後，本來滿懷希望的曹秀清心裡一下子涼了半截，她萬萬沒想到蔣介石會如此絕情，連區區三千元都不肯幫。
杜聿明聽到妻子的這段講述很傷心，想到自己曾跟随蔣介石風風雨雨、鞍前馬後幾十年，當年淮海戰役酣戰之時，蔣介石為使他甘心為搖搖欲墜的蔣家王朝賣命，在他母親生日時下令在上海為杜母隆重祝壽，蔣經國親自送上三千元金圓劵。
如今時過境遷，到頭來自己落得個悲困交加、無人理睬的結局，連為兒子籌點學費，蔣介石都不肯幫，他對蔣介石如此薄情寡義感到心寒齒涼。
妻子告訴杜聿明，女婿楊振甯獲諾貝爾獎後，蔣介石夫婦對她忽然熱情起來，還厚葬了杜母
妻子曹秀清還告訴杜聿明另外一件事：他們的女婿楊振甯獲得諾貝爾實體獎後，蔣介石夫婦忽然對多年從未理睬過的她表現得分外熱情。
曹秀清說，1957楊振甯獲諾貝爾實體學獎不長時間，杜聿明的母親在台灣去世，蔣介石在台灣厚葬杜母。
在蔣介石授意下，有人在杜母靈堂上方高懸青天白日旗，國民黨大員陳誠、何應欽、張群、谷正綱等人均親書敬挽，杜母靈堂前吊唁人流絡繹不絕，這使曾備受冷落的杜家人感到十分不解，當時曹秀清被震驚得目瞪口呆，不知蔣介石葫蘆裡賣的什麼藥。
直到後來蔣介石夫婦召見曹秀清，她才弄清楚蔣介石的用意。
1958年的一天，宋美齡突然派車來接曹秀清到士林官邸，這使曹秀清感到很意外，曹秀清當時想：“我已經被冷落了多年，她怎麼突然想起我了呢？”
見到宋美齡後，宋美齡笑容可掬地握住曹秀清的手說：
“杜夫人，恭喜你女婿楊振甯博士獲得了諾貝爾獎金，你該去美國看看他呀！”
宋美齡又說：
“杜夫人，希望你從美國回來時，把楊振甯也帶回台灣，讓他協助蔣總統反攻大陸。”
曹秀清這才明白蔣介石夫婦的良苦用心，原來蔣介石是要她去美國勸說楊振甯到台灣來，好為他所用。
宋美齡話音剛落，蔣介石也走進屋内，他貌似關心地問曹秀清：
“孩子們怎麼樣？你的身體好嗎？”
能得到“蔣總統”的關心，這種“待遇”可不是什麼人都能享有的，可是曹秀清内心中卻毫無一絲感激，她早就看透了蔣介石的真面目，她有些冷淡地回答：
“大兒子沒有錢上學，我的身體也不好。”
聽到曹秀清的話，蔣介石想起了曹秀清請他批付三千元，他卻隻批了一千，而且還是分二年付清這件事，蔣介石很清楚曹秀清内心中對他的不滿，他略顯尴尬，皮笑肉不笑地說：
“嗯，嗯，慢慢調養。”
說完這句話，蔣介石轉身離去。
因為沾了女婿楊振甯的光，曹秀清終于被獲準去美國探親，期限為半年，如有特殊情況可延長6個月。
台灣國民黨當局怕曹秀清一去不回，威脅曹秀清說：“逾期不歸，将罰以巨款”。不僅如此，台灣當局還不讓她帶子女，并找了兩個有地位的人作擔保。
1959年初，曹秀清來到了美國，由于她不想再傳回台灣那個傷心之地，讓女兒女婿為她申辦了長久居住證，她在美國一住便是六年。
聽到妻子曹秀清的這番講述，杜聿明悲傷之中又平添了幾分憤怒，蔣介石用人朝前，不用人朝後，蔣介石這種一貫的勢利和卑鄙令他感到不齒。
曹秀清還告訴杜聿明：
“因為你被共産黨釋放了，你又寫了很多文史資料，台灣方面罵你是叛徒呢。”
一聽這話，杜聿明再也按捺不住心中的怒火，他大聲說：
“我投降的是人民，追随的是時代，隻要我沒有背叛真理，我就不是叛徒！”
通過在戰犯管理所中的改造，此時的杜聿明思想上已經發生了巨大的變化，作為戰犯，杜聿明當初想的更多的是自己的後半生沒有盼頭了，他認為自己将受到懲罰。然而人民政府不但不歧視、不虐待他，相反在生活上、思想上處處關心他，這是他做夢都沒想到的。
人民政府派人派車将身患重病的他接到最好的醫院進行醫治，甚至派專人專程到港澳地區花費重金為他購買内地奇缺的貴重藥品。
為了使他虛弱的身體盡快恢複，在當時全國人民生活水準普遍比較低的情況下，管理所特意為他開“小竈”，為他烹制雞鴨魚肉等營養食物，還每天供應他一磅牛奶。在精心的照顧及治療下，杜聿明身患多年的重病都被治好了。
杜聿明曾拉着功德林負責人的手說：
“沒有你們為我治病，我早完了，共産黨是我的再生父母，毛主席是我的救命恩人！”
政府不但關心照顧他的生活和身體，還在精神上給他以莫大的安慰。在管理所的安排下，前國民黨起義将領，如今為新中國工作的程潛、張治中、傅作義等人先後前去看望他，通過與他交談做他的說服，鼓勵他放下包袱。
當他的女婿楊振甯博士榮獲諾貝爾獎後，人民政府還主動為他與遠在美國的楊振甯取得了聯系，并通過楊振甯向妻子和家人報了平安，這一切都給了杜聿明莫大的安慰。
被第一批特赦後，1959年12月4日，杜聿明重獲自由。從此，杜聿明把每年的12月4日作為他的新生誕辰日，他常對人說：
“人說十年一覺揚州夢，這是青樓人的憶舊眷戀之情。我們呢，則是十年不見紅爐煉，留得丹心報人民。”
與妻子相聚後，杜聿明從妻子口中聽到家人這些年來一連串的遭遇後，他既悲傷又憤怒，又感到十分慶幸。悲傷的是長子永遠離開了自己，憤怒的是曾為之賣命的蔣介石竟然兩面三刀，是個勢利小人。慶幸的是如今重獲新生，與妻子終于相聚。
杜聿明去世前囑咐妻子：我死之後，你就在大陸定居，和孩子們多為祖國建設做貢獻
杜聿明衷心覺得，祖國大陸才是中華民族未來發展的希望之所在，像女婿楊振甯這樣的人才應該回到大陸為國家做出自己的貢獻。
周總理一直十分關心杜聿明，得知曹秀清飛回祖國大陸，他們夫婦得以團圓，周總理十分高興。他向杜聿明夫婦發出邀請，請他們到人民大會堂會面，杜聿明和曹秀清接到周總理的請帖時十分興奮。
1963年11月10日，周總理與陳毅副總理在人民大會堂福建廳接見了杜聿明夫婦以及溥儀等文史專員和他們的妻子。細心的周總理考慮得十分周到，特意邀請了魯迅的夫人許廣平、張治中先生和夫人、傅作義先生和夫人作陪。
周總理非常熱情地同曹秀清握手并親切地對她說：“歡迎你回國定居”。
聽到周總理親切的話語，曹秀清激動得流下了熱淚。
在這次會見中，周總理多次詢問他們的工作生活情況，鼓勵他們繼續進步，總理的關心使杜聿明夫婦心裡熱乎乎的，曹秀清更是感覺自己回國的路沒有選擇錯。
1981年5月7日，時任全國政協常務委員的杜聿明因病在北京逝世，在臨終之時，杜聿明囑咐妻子曹秀清：
“我死了之後，你哪也不要去，不要去美國，更不要去台灣，你就在大陸定居，和孩子們多為祖國建設做貢獻。”
聽到丈夫杜聿明的臨終交代，曹秀清淚流滿面，她連連點頭答應。