1949年11月30日重慶解放。楊森逃到成都。不久由成都飛臺灣。此后受到蔣介石器重，委任為臺灣“總統府上將國策顧問”，并長時期分管體育運動。楊森長壽，體健，70歲時學會駕駛教練飛機而轟動臺灣。86歲登上海拔4000米高的玉山。90歲大壽時，就在生日會上，楊森對四川同鄉、國民黨元老張群嘆道：“我這個人就是喜歡和年輕人在一起，這樣才有朝氣。”張群知他的心思是又想“一樹梨花壓海棠”，便笑道：“那你再討(娶)一個嘛！”就這樣，17歲的初中生張靈鳳被楊森以招募“秘書”為名，娶進府中，成了楊府第“十二釵”。不到一年，張靈鳳居然為楊森生下最后一女，排行第43，一時海內外傳為奇談。1977年96歲的楊森壽終。

在四川軍閥中，原國民黨陸軍上將、20軍軍長楊森與重慶淵源最深。

上世紀20年代初，重慶為四川省省會，劉湘任省長，楊森任重慶商埠督辦。1947年至重慶解放，楊森任重慶市長。今市少年宮地址便是解放前的楊森公館。

關于楊森的老龍門陣不少，比如打狗，據說是他又名楊子惠，怕狗吃羊子，發動打狗運動。楊森對重慶市政建設做過不少好事，相傳他曾仿效三國李嚴，有過開鑿鵝嶺連通兩江的規劃。不過呢，最為流傳的，是楊森的風流韻事，楊森妻妾成群，兒女眾多，尋花問柳不算，單是公開的妻妾就有12位，被稱為“十二釵”;子女共有43人。

每個老婆都有故事。其中情節最曲折的，是他制裁“叛逆”姨太的殘忍手段。楊森納妾皆為色欲所需，個個都是絕色美女。然而，美麗對于女人而言，無異于抱璧藏禍。楊森的第七妾曾桂枝與第八妾蔡文娜，皆因驚艷美色，抵擋不住尋芳客的糾纏，情難自禁，導致紅杏出墻，最后慘死在心狠手辣的楊森手里。

在七姨太曾桂枝20歲時，楊森將她送到上海讀大學。這一下，曾桂枝像飛鳥投林一樣，開心不已，不久和一位陳姓同學相戀了。從未體驗過愛情的曾桂枝如沐春風，她和戀人成雙成對，出入舞廳，卿卿我我。豈料這些情況被楊森安插在上海的耳目偵知。于是，怒火中燒的楊森，找借口將曾桂枝催回了四川渠縣防區。臨別時，陳姓同學將一枚家傳的戒指戴在了曾桂枝手上，還拜托她在楊森手下謀份差事。就這樣，這位七姨太歡天喜地地回到渠縣，并帶回了戀人的照片，央求楊森替這位陳姓同學安排工作。楊森不露聲色地說：“這等小事有啥難的。給你同學寫信，我讓他來當渠縣的教育局長。”曾桂枝一聽，喜形于色，當即便飛鴻傳書，叫戀人來到渠縣。哪知姓陳的一跨入渠縣境內，便被楊森的憲兵隊設伏，用冷槍打死，暴尸荒野。此時，曾桂枝還心花怒放地帶上兩名警衛去河邊迎接。當她哼著小調跨上船時，身后便響起了警衛如同冰窟里飄出的聲音：“對不起，太太，軍長有令，送你上路。”隨即扣動了扳機……殺死二人后，楊森仍覺得不解恨。他又派兵將二人縛上巨石，沉入渠江。

楊森殘殺姨太的事，除七姨太外，八姨太蔡文娜的命運如出一轍，先也是送她上大學(華西大學)，也是紅杏出墻戀上小白臉，結局是被亂槍打死在重慶楊森的官邸，然后，為了殺一儆百，楊森集合起妻妾一同來到現場，命她們仔細觀看，妻妾們個個嚇得面色蒼白，顫抖不已。次日黎明，蔡文娜滿身血污的尸體被床單包裹住，丟到楊森在重慶的官邸——“渝舍”網球場邊的枯井，草草填平了事。

1949年11月30日重慶解放。楊森逃到成都。不久由成都飛臺灣。此后受到蔣介石器重，委任為臺灣“總統府上將國策顧問”，并長時期分管體育運動。楊森長壽，體健，70歲時學會駕駛教練飛機而轟動臺灣。86歲登上海拔4000米高的玉山。90歲大壽時，就在生日會上，楊森對四川同鄉、國民黨元老張群嘆道：“我這個人就是喜歡和年輕人在一起，這樣才有朝氣。”張群知他的心思是又想“一樹梨花壓海棠”，便笑道：“那你再討(娶)一個嘛！”就這樣，17歲的初中生張靈鳳被楊森以招募“秘書”為名，娶進府中，成了楊府第“十二釵”。不到一年，張靈鳳居然為楊森生下最后一女，排行第43，一時海內外傳為奇談。1977年96歲的楊森壽終。