每次聚餐都邀請一些知名愛國民主人士蒞臨講演，計先後有陶行知、郭沫若、鄧初民、屈武、王芸生、劉王立明等。內容主要是宣講抗日形勢和抗戰必勝的道理等。馮對“利他聚餐會”非常重視，每會演講某一專題，內容都有針對性的，堅信抗戰必勝。他的演講談古論今，旁征博引，雄辯鏗鏘，有的放矢，幽默詼諧，深受大家歡迎。他經常說：人不隻是光為自己而活著，要為社會做些好事，有利於國家和人民，才不愧做一輩子人，也才有點人生的意義。所謂“生當作人傑，死亦為鬼雄”，鼓勵社員們樹立和他精神。
以後，不斷有新成員參加，因此正式組成“利他社”，馮為永久會長。下設理事長，由張樹聲的大弟子、重慶義林醫院院長李義銘擔任，副理事長有陳錫章、馮子源、楊亞西、李躍光等。
黃次鹹是重慶基督教青年會總幹事，自從參加了“利他社”後十分積極，還提供辦公室，此後馮即以大梁子青年會為吸收新社員的地方。雖然沒有擺香堂，其他與青幫形式一樣，入社除介紹人外要填表，然後跪拜、宣誓忠於馮先生，贄見禮比入張樹聲的青幫要高，並要用紅紙包好，寫好門生帖子，才算完成拜門手續。
來參拜的人，肯交一筆高的贄金，都是有個人的目的。有一個門人，得到馮支持在江北縣當上鄉長。有的被抓進警察局因馮的關係而獲保釋，有的利用馮的名片四處招搖集資辦公司。馮對這些學生門徒很愛護，作為自己新生力量，但反被門徒利用了。
中、軍統通過各種渠道打進“利他社”。社員霍濟光是“中統”“黨網”組長；理事之一任百鵬是三青團分團長，當過江北縣的區長，後又當上市參議員，還兼重慶警備部稽查處專員、中統黨網、憲兵特高級聯絡員，還當《農工日報》社長。還有軍統渝特區組長張克東，奉軍統之命打入“利他社”，對馮與“利他社”的活動，不斷向軍統報告，現重慶檔案館還可查閱到張所寫的監視報告。這一類的監視報告，如雪片一般送到侍從室，因此為蔣介石所不容。1946年國民政府還都南京，在蔣的示意下，勸馮出國走走。馮本人也想出國看一看，因此向蔣寫了一個報告，很快就由國民政府明令發表：“派馮委員玉祥赴美考察水利事宜。”９月 2日，馮在上海乘船赴美國。在美國馮還是十分關注國內形勢。蔣大舉進攻人民解放區，同時鎮壓國統區愛國民主運動，馮十分反感，於 1947年 5月在華人集中的美國舊金山華文報紙《世界日報》上發表《告全國同胞書》，公開與蔣介石決裂，反對蔣介石利用美援打內戰，列舉蔣介石一係列罪狀。
10月 10日國民黨國慶節，馮在哥倫比亞大學演講，反對蔣打內戰，呼籲實現和平民主。次月在美紐約組織“中國和平民主聯盟”，聯合在美進步人士，擴大反蔣力量，並發表《我為什麼與蔣介石決裂》一書。這等等活動，引起南京政府不滿。同年 12月 6日正式通知勒令馮回國。並吊銷護照。馮通過蘇聯大使館幫助於 7月 3日離美，計劃經蘇聯返回解放區，不幸油輪起火，焚於火中。“壯誌未成身先死”，骨灰運回國，安葬於馮生前喜歡的泰山上。
全國解放後，馮夫人李德全通知大家說：“現在解放了，在毛主席領導下，馮先生生前的願望已實現了。我們大家就在各自的崗位上做好工作，擁護中國共產黨和社會主義新中國吧！”