杨虎城将军一生经历了三段婚姻，与众不同的是同一时期都存续着两段婚姻，妻子之间亲如姐们。而且每段婚姻都有一段传奇故事。
1926年11月27日晚，北洋军阀部队从西安外围撤走，西安军民彻夜未眠，奔走欢呼。这意味着古城西安在被困八个月后终于解围，而西安城池之所以能坚守长达八个月不破，这和杨虎城将军的拼死抵抗有必然关系。
但就在西安解围第二天，杨虎城将军即率领疲惫不堪的部队撤出西安，转移至渭北一带休整。更出人意料的是就在此时，杨虎城却仅带一名随从悄然脱离了部队，在富平隐居起来。至于为什么要这样做呢？原因很复杂，一方面是带有一定的自责感，西安被围八个月，军民生活艰难，饿死的人不在少数，作为土生土长的陕西汉子，觉得有点对不起父老乡亲。另一方面是冯玉祥的部队到来，控制了西安，局势变得很微妙。
不管出于何种原因，这会部队和家人均不知道杨虎城的踪影。但就在西安解围之前，杨家已经发生了一件大事，可惜杨虎城丝毫不知情。
10月24日，杨虎城原配夫人罗佩兰病逝于三原，时年仅24岁，留下一个4岁的儿子和一个2岁的女儿。在此之前，她已经被确诊为肺结核晚期，留在三原养病。即便自己已经危在旦夕，但罗佩兰仍然惦记着西安人民的安危。在西安被围期间，城内粮食匮乏，北洋军阀刘镇华部队丧心病狂，将城外即将收割的麦子也全部付之一炬，城内饿死的百姓很多。对百姓的疾苦，罗佩兰感同身受，她强忍着病痛的折磨，亲自督办，让人在外县农村买粮食接济西安。直到她病情恶化，再也爬不起来了，才有心无力了。
按照当地的风俗，人死后3天内就必须入殓。由于杨虎城杳无音讯，罗佩兰的葬礼便由朋友、部属操办，丧事办的依然很隆重，前来吊唁的人络绎不绝，其中不乏冯玉祥、于右任等社会名流。但唯独一直都没有杨虎城的消息。直到数十天以后，一天下午，一个穿着黑色长袍的人，跌跌撞撞地跑进了灵堂，直扑向棺材。大喊:“佩兰啊！”就晕了过去。来人正是杨虎城。
妻子的突然离世让杨虎城悲痛欲绝，他很后悔没能见上妻子最后一面，甚至妻子在临终之前都不知道他是死是活。铁铮铮的西北汉子，此时也被击垮。妻子出殡时，儿子仅有2岁，杨虎城自己承担了“孝子”的角色，披麻戴孝，执孝子之礼。按照风俗，只有对长辈才可以这样做的，杨虎城的做法在陕西关中一带是非常罕见的。这种感情似乎已经超越夫妻感情。关于杨虎城和原配夫人罗佩兰之间的爱情有一段动人的故事。
罗佩兰，1902年出生于四川广汉县，家贫姊妹又多，母亲为一个叫张西铭的在当地做生意的陕西商人打长工，做一些缝缝补补的事情。罗佩兰很小的时候便经常去给母亲帮忙，张西铭观察到罗佩兰聪明能干，很讨人喜欢，便认作义女。有一次，张西铭在回陕西探亲时将罗佩兰带回了老家大荔县。此时，杨虎城时任陕西陆军第三混成团一营营长，驻防大荔县。他正好与张西铭相熟，常去张家做客，因此便有机会见到了罗佩兰。两人一见倾心，互生情愫，不久，杨虎城便派人上门提亲，张西铭虽然只是罗佩兰的义父，但他知道杨虎城是一个有为的青年，便自己做主同意了这门亲事。
1916年，杨虎城与罗佩兰结婚，此时罗佩兰刚刚14岁，杨虎城26岁。婚后两人感情很好，罗佩兰聪明机智，生性好强，常伴杨虎城左右，还学会了骑射，渐渐成长为杨虎城的贤内助。她性格开朗，非常善于结识和笼络杨虎城部属和朋友。在部队战斗失利时，她常随夫奔走前线，慰问伤员，鼓舞士气。在关键时刻，她总能为杨虎城排忧解难。因此，杨虎城对妻子又爱又敬，因此罗佩兰在杨虎城的部属和朋友中享有很高的威望。这也是在罗佩兰离世时，吊唁的人很多的原因了。
但即便如此，在封建婚姻制度下，这段自由恋爱的婚姻并得不到祝福，杨虎城母亲孙一莲还想为儿子娶一房令她满意的媳妇。
杨虎城和罗佩兰完婚后，有一次回蒲城老家看望母亲，见到了一些老朋友。其中有一位开中药铺的张姓朋友，当年杨虎城负伤时曾得到他的救治，如此一来，二人成为莫逆之交。张姓朋友一直以来对杨虎城比较欣赏，这次他执意要将自己唯一的女儿张蕙兰许配给杨虎城作妾。杨虎城坚决推辞，但张姓朋友却初衷不改，怎么劝都没有用。并在杨虎城离开后，前去游说杨虎城的母亲，极力促成了这门亲事。
1919年，杨母以家中有事为由，将杨虎城叫回家，命杨与张蕙兰结婚。杨是个出了名的大孝子，不敢违母亲的意，便只好拜堂成亲了。而此时杨蕙兰只有14岁，还只是一个孩子，也只能听从大人的安排。一开始，这段婚姻就是一个悲剧。在杨蕙兰懂事之后，她开始怨恨自己的父亲，并和他断绝了父女关系和一切来往，直到父亲离世。但对杨虎城而言，这段婚姻也是美好的，杨蕙兰虽对父亲充满恨意，但对杨虎城却敬爱有加，杨虎城对她也非常同情，看做亲人。
蕙兰妻览:你佩兰姐幸生男孩，我闻之不胜欣忭！但你姐平素身体虚弱，又在新病之后，一切饮食起居，我妻务须小心伺候，以免你姐劳神。只要你姐母子平安，便是你的功劳，我便非常感激也。千万万。此问近安，并松合家吉祥。夫手谕，十一月初十日。
这是杨虎城写给第二任夫人杨蕙兰的一封家信，信中都是满满的亲情。的确杨蕙兰对杨虎城而言也是不可或缺的。
原配夫人罗佩兰病逝后，留下的一对幼小的儿女，孤苦伶仃，杨虎城整天忙于军务，根本没有时间照顾。尤其是杨虎城离陕参加北伐后，更是鞭长莫及。这时杨蕙兰仍留在三原，便毫无怨言的承担起抚养义务，对两个孩子疼爱有加，如同亲生的。因此，杨虎城才得以全身心的投入到北伐战争中。
但在北伐过程中，杨虎城又认识了第三位夫人谢葆真。
谢葆真，生于1913年，陕西西安人，西安围城时，她还是西安的中学生，已经参加了中共组织的守城活动。西安解围后，她参加了国民军组织的前线工作团，离开西安参加北伐，在前线她加入了中国共产党。后组织派她到杨虎城的军政治部做宣传工作。谢葆真的最大特点就是革命热情高，口才流利，演讲水平高。真是凭借这一优势，谢葆真引起杨虎城的注意，由欣赏逐渐发展到爱慕。
1928年，在轰轰烈烈的北伐战争中，二人结了婚。这时谢葆真刚刚15岁，杨虎城已过35岁。在结婚宴上，有人问:“杨将军为何爱上小谢？”杨虎城坦率的讲:“我知道她思想进步，为了革命需要她”而谢葆真的回答更绝:“我不要你海誓山盟，只要你革命就行”。
婚后，二人离开了部队，去了日本。但就在她离开部队不久，组织发动的“皖北暴动”失败了，杨虎城部队中的党组织遭到了破坏，从此，谢葆真就与组织失去了联系，而且她的身份也暴露了，引起特务的警觉。但由于她的身份特别，特务们也不敢轻举妄动。谢葆真基本不离杨的左右，随杨征战南北。
西安事变后，蒋介石逼迫杨虎城出国考察，杨精神压力很大，曾一度病倒。但就在这时杨蕙兰唯一的孩子杨拯人也病了。而此时所有人的注意力都在杨虎城身上了，而忽略了这个孩子，当送进医院时已经为时已晚了。杨蕙兰失去了唯一的孩子后，精神几近崩溃。家庭的这些变故，对杨虎城来说更是雪上加霜。但又无可奈何，不得不出走国外。
出走海外的杨虎城一直关注着抗战的形势，并多次向蒋介石提出回国抗日的请求，但无奈一次次遭到拒绝。其实从心底蒋介石根本不希望他回国。
在多方努力之下，1937年10月，杨虎城终于结束了长达5个月的海外考察，携夫人谢葆真、次子杨拯中回国。11月底到达香港后分手，杨按照戴笠的安排准备去面见蒋介石。妻子及儿子回到了西安。但所有人都被蒋介石的伪面孔蒙蔽。谢葆真刚刚回到西安不久，就惊闻杨虎城被监禁，她心急如焚，一边打探消息，一边做好了去探望的准备。她想:蒋介石或许以对待张学良的方式对待杨虎城。但她彻底想错了。有一个人早盯上她了，那就是戴笠，早在“皖北暴动”失败后，她已经成为特务的监控对象。此时去探望杨虎城，那就是自投罗网。
果然如此，1938年1月，谢葆真携子拯中及副官阎继明、张醒民一同去探望杨虎城，刚一到南昌，4人就被关押起来。直到半年后才与杨虎城团聚。但杨虎城见到妻子，心里却有一种说不出感觉。
从此刻开始，在长达9年的时间里，谢葆真再没能离开过监狱，直到1947年在狱中含恨而死。在这段时间里，谢葆真受尽了屈辱和折磨，精神渐渐失常。但好在她在狱中诞下一名女婴，精神稍微有所寄托和慰籍。然而不幸的是女性中途夭折。为了不再让妻子遭受刺激，杨虎城瞒着谢葆真通过特务从外面找来一个女婴作为替代。这个女婴便是他们最小的女儿拯国。
1949年9月6日，杨虎城、儿子杨拯中、女儿杨拯国、秘书一家三口及两名副官全部死在特务的屠刀之下，连孩子也不放过。事后，毛人凤对沈醉说:“老头子（蒋介石）对于这件事干得如此干净利落，很感满意。”
杨虎城一生经历了三位夫人，育有10个子女，其中原配夫人罗佩兰育有1子1女;二夫人杨蕙兰育有1子，但不幸夭折;三夫人谢葆真育有2子5女，但2个儿子和1个女儿都遭遇不幸。杨蕙兰最终虽然没有自己的子女，但她却承担起扶养罗佩兰和谢葆真子女的责任。他们都亲切的称她为“蕙兰娘”。
杨虎城虽然子女众多，但最终生存下来的儿子只有长子杨拯民，母亲为罗佩兰。杨拯民先从军后从政，曾任陕西省委书记。他晚年的最大愿望是去美国看望张学良。1996年，他拿到了美国的签证，但最终因为身体原因，不得不放弃，两年后病逝于北京，享年76岁。