四川大军阀杨森以妻妾成群，儿女众多而出名，仅明媒正娶的就有十二位，杨森的姨太太大多都是14-18岁，而他的儿女有40多个。杨森把妇女当作玩物，还掌握着这些被侮辱与被损害的妇女的生杀大权。
面对这么多的妻妾，这么多的子女，杨森是如何管理的呢？
杨森给妻妾制定了许多禁律，比如请客、打牌、吸烟、酗酒、跳舞、看戏、看电影这类都不可以有，家里的任何东西都不能私用等等。家中事务由各房妻妾按月轮流管理。大人和小孩都规定了一定数量的“月份钱”。
他在家时，年龄小一点的老婆每天早上都要陪他去打球或骑马。还规定她们读古文、弹钢琴，后来还增加学英语。平时稍不如意，非打即骂，有时甚至把大家跪成一排，打“满堂红”。各个妻妾对杨森就像孝敬皇帝的老儿一样，竭力奉承。
杨森自己规定在每个老婆处轮流住宿三夜。如果哪一个老婆怀了孕，发给五千元生活费，如果哪一个生了孩子，就为她在国外银行存20000元。她们为了争得这一笔子女费，都想多生个儿女。每个妾还分有一份田产。
春去秋来，花开花谢，任何人也逃不脱新陈代谢的规律，焉能有不老之理？可是妻妾一旦年长色衰，杨森就弃之一旁。她们若有外遇，一旦发现即会被处死。杨森本人声色犬马，拈花惹草，随心所欲，而对于妻妾清规戒律却很多：请客、打牌、吸烟、酗酒、跳舞、看戏、看电影等皆在禁止之列。
杨森在贵州娶17岁的郑文如时，他的大多数子女都比郑文如年长，不愿叫“郑妈”，称她“郑小姐”。杨森认为子女敢违抗自己的旨意，实属忤逆，大发雷霆，把儿女集合起来，用马鞭子打了个“满堂红”，逼着子女们当面喊“郑妈”，子女们默不作声，他气得破口大骂，皮靴抽得直响。其他妻妾怕自己的孩子吃苦头，便出来劝他们改口称“郑娘”才作罢。
杨森仗其权势，所纳之妾都在18岁以下，其中后面七个妾的年龄是：陈15、曾14、汪15、蔡14、郑17、胡18、张17，平均年龄才15.7岁，她们都是弱女子，都是在杨森权势日大、淫威日甚的情况下被迫为妾的。他一方面利用这些女孩子家庭的穷困，软硬兼施，使家长不得安生，被迫就范；又利用这些女孩子未成年，无力反抗家长，更无力反抗杨森的蹂躏；由于年纪小，还意识不到这是关系终身的大事，于是糊糊涂涂、懵懵懂懂地就被迫与杨森同居了，待年龄大了，懂事了，木已成舟，拖儿带女，也就难以摆脱了。
令人可笑更可恨的是，他对自己不断纳妾、玩弄女性，还编造了一套强词夺理、恬不知耻的“理论”，胡说什么：“我是一个爱前进的人，我的伴侣也要是一个爱前进的人。所以，我的老婆中有小脚的，有半大脚的，还有大脚的；如果说文化，她们有不认字的，有小学生，中学生，大学生。这样我前进，我的老婆也前进。”
他还对他的一个儿子说：“父亲老了，身边总要有个贴身人侍候，你们的各位妈妈都一天到晚忙着照看自己的娃娃，哪有空管我，我只好另结一个算了吧！”
他想粉饰自己的行为，但恰恰相反，结果是欲盖弥彰。
杨森的钱有多少，谁也不知道，他亲自掌管，没有一个妻妾是他完全信任的。在日本，他存了几十万银元，抗战爆发后，被日本没收了。他在美丰银行、聚兴诚银行都有投资与巨额存款，还开办了大川银行，副军长夏炯常替他跑香港的生意。民生公司、华西兴业公司、重庆电力公司都有他的投资。
1949年，重庆解放前夕，杨森集党政军大权于一身，成立“保民军”五个军，我军逼近时，刘伯承念及他早年曾拯救过胡志明，抗日中颇有战功，便派人策动他起义，条件有三：生擒蒋介石、保护被关押在白公馆渣滓洞的同志、保护重庆工厂。杨森因制造过“平江惨案”，因而顾虑重重，仅派员说明可保证市区安全。
狡兔有三窟。他先派第四妾田蘅秋携带金银财宝经香港去台。因田蘅秋的三女郁文是蒋介石的外侄媳，田蘅秋到了可与蒋介石拉上姻亲关系。这就为杨森到台湾立足打下基础。
最后，除新纳的18岁小妾胡洁玉随机飞台外，其他妾都未带走，由此可见这些妾在他心目中毫无地位，只不过玩玩而已。
杨森在家庭中也是至高无上的主宰，他对子女的管教，是封建加崇洋。
他规定儿女都要大学毕业，能上研究院最好。儿女读书都住校，只有星期天和节假日才回家。在家里必须学打网球、骑马、弹钢琴或其他西洋乐器。他请了家庭教师教古文、补习英语、数学。在寒暑假期间对子女的家庭作业，也安排得很紧，几乎没有自由活动的时间，更不准随便出大门一步。杨森每次回家总要举行家庭音乐会和球赛，检查子女的学习成绩。
杨森喜欢穿西装、吃西餐，喜欢同外国人一起照相，有英文秘书，用英文字母Y.S作为他的签名。他喜欢外国音乐，所以要子女学钢琴、提琴、黑管、长短号等。先后找清室慈禧皇宫乐队吹黑管的穆自清，贵州的钢琴教师王良华、任瑞清及提琴教师费满尔等任家庭音乐教师。在家庭音乐会上，教师、子女都要演奏给他听。有几个子女曾提出想学中国乐器，如胡琴等。他却说：“胡琴是瞎子算命混饭吃的东西，有什么学头？”他的子女中，学音乐的就有好几个。
杨森为了对儿女灌输一套观念，还亲自规定每餐饭前，像基督教徒一样，双手合十，拖长音调祷告。祷告词也是他亲自拟定的：
爹爹妈妈，给我们饭吃，我们要听教训，学好人，才对得起爹爹妈妈，请！
说完“请”字，才开始吃饭。
杨森规定吃饭时，分三张圆桌，一张大的是他的姨太太们坐的，另一张大的是较大的儿女坐的，小的一张是小儿女坐的。他那一桌，他坐上席，姨太太们打扮得花枝招展，像众星拱月一样围绕着他。一面大吃美味佳肴，一面嘻哈笑乐。儿女们有的渐长，对杨森的做法不大顺眼，因此饭前做祷告，不过闭上眼睛合上手，嘴里叽叽咕咕不知所云，有时还互相作怪脸，挤眉弄眼。
有一次饭前做祷告时，孩子们看到杨森和郑文如等年轻小老婆在饭桌上的情景，感到厌恶，只念了一句“爹爹妈妈”，就再也念不下去了。杨森立即拍桌子，大发雷霆。姨太们骇得发慌，怕自己孩子挨打，只好假意大骂儿女们，要他们重做祷告才罢。
平时，儿女们对于杨的旨意，谁也不敢稍有违背，否则就要挨他的马鞭。肖邦琼生的三儿杨汉渝，本来很受宠爱。杨汉渝三、四岁时，杨森和肖邦琼逗他：“你长大了，喜欢爹妈，还是喜欢老婆？”汉渝答：“喜欢老婆。”从此就不喜欢杨汉渝了。
一个文人向杨森献殷勤，根据杨森的“森”字设计了一个图案作为家徽。于是杨森坐的吉普车就刷上这个符号，其他许多东西都印上这个符号。若是哪个子女进了大学，就给金项链作奖品，上面也印上这个符号。当时有人看到这一符号，暗地说既像一个“多足爬虫”，又像一个“乌龟”。
杨森的姨太太们相互间不免争风吃醋，勾心斗角。当她们心烦意躁时，就在自己亲生儿女身上出气。所以儿女们对这个家庭，都感到沉闷窒息，没有温暖。又眼见姨太太们有的被惨杀，有的被逼疯，堂堂的“杨公馆”，白天一片纷乱，哭哭啼啼，吵吵嚷嚷，晚上气氛阴森恐怖。所以儿女们都希望自己赶快长大，远走高飞。
后来杨森逃往台，身边只有一个胡洁玉，在杨森86岁时，她生下一女，后带着女儿远赴美国，再没有回来。
杨森年近90岁时，将一个叫张灵凤的17岁中学生弄进府中，完成了他人生的最后一次婚姻。
1977年5月17日，杨森无病而终，死于稻子园别墅。