張學良一生風流倜傥，不管是對于趙四小姐還是于鳳至，都被他迷得神魂颠倒。但是張學良一輩子真正寵愛過的女人隻有她。
1922年4月，第一次奉直戰争爆發，在宴會上，張學良認識了一個非常漂亮的女孩子——谷瑞玉。谷瑞玉的家族世代經商，這次宴會就是她的二姐夫舉辦的。兩個人相見恨晚。那一年張學良21歲，谷瑞玉18歲。正是風華正茂的大好年紀。
1924年9月第二次奉直戰争再次爆發，張學良當時率軍堅守在前線。當時谷瑞玉就寫信給張學良，訴說着自己的思念。後來更是不顧危險前去看望張學良。這讓張學良大受感動，戰争結束後，在10月和谷瑞玉在天津結婚了。但是谷瑞玉是張學良的二房夫人，于鳳至是不會待見她的，于是谷瑞玉隻好滞留在了天津。
谷瑞玉在1925年春節前搬進了張學良給她在沈陽置辦的小洋房裡。當時張學良的手下都知道這位二夫人，并且也見過面。因為谷瑞玉長得很是漂亮，又有俄國人的血統。于是張學良的部下稱她為“大洋馬”張學良聽到後并沒有什麼反應。
谷瑞玉跟着張學良南征北戰，受了很多的苦。谷瑞玉更是放言：“隻要有你在的地方就有我，哪怕是天涯海角，我都敢去！”張學良大為感動，錦衣玉食的供養着她。
隻可惜到了後期，谷瑞玉迷戀麻将和戲曲，兩人之間沖突增多，再也不複往日溫情。1931年，兩人協定離婚。至此，谷瑞玉都沒有踏進張學良祖宅一步。