這次到軍部在饒的辦公室隔壁我遇見了譚震林，他知道我上次與饒政委頂撞的事，勸我不要那樣對待邵式軍。10月間，我結束上海的工作回軍部，正值軍部奉中央軍委電令新四軍軍部北上與山東軍區合並，軍部直屬機關由饒漱石、張雲逸率領，從淮陰出發，北上山東，饒漱石、張雲逸還指派我負責帶隊。足見饒對幹部對我還是很寬厚的。
由於一直搞偵察、情報與保衛工作，王征明在解放戰爭時期和建國初期，與饒漱石都有著直接或間接的接觸，在揚帆手下工作則始於1948年。在談到“饒、潘、揚反革命集團”時，他說：
……我作為一個被審查的人，饒、潘、揚案件，是不是我最了解呢？不能這麼講，因為我們始終是被審查的，你還不曉得哪個地方還有什麼烏裏馬裏的內幕、黑幕，不知道啊，上層的事情不知道，我們知道的本身就是很有限的。但你這次來，我總要讓你不虛此行，第一我是這個案子的親曆者、受害者，現在剩下的沒幾個人，剩的人有的他也說不清楚。第二我在離休以後，主動請求搞了點有意義的事情：一是解放戰爭時期的華東情報史；二是參加了上海反間諜鬥爭史的編集（我們在上海破的大案要案），這個我參加了，但不是以我為主，是安全部的淩雲部長親自掛帥。廣州也出了個冤案——陳泊案，他平反以後沒有人給他搞這個東西。我們上海隔了多年後把大案重新給它梳理、整理成文字，還有概述，都印好了，這些都是在潘揚領導下隱蔽鬥爭戰線的業績和史實。可惜這個材料都封鎖起來，存檔，我真不明白為什麼不拿出來進行傳統教育派用處！第三，不管怎麼講，在華東這個地方，黃花塘時代在軍部的人沒有幾個了，了解這個案子的也沒有幾個了。而且一些東西有的人知道他也不講。（笑）
我先講跟饒漱石有關的。跟他有關的，講起來就是“以特反特”。抓他的辮子，抓他的毛病，就是“以特反特”。這個事情，現在看起來是做對了還是做錯了？現在我們可以回答：抓這個辮子，他們抓錯了，（饒）沒有錯誤，也沒有罪，而且有很大成績！要挺直腰杆這樣講！這樣看。如果說有某些錯誤，也是揚帆和我們這些執行者沒有經驗造成的。這個“以特反特”第一是胡鈞鶴，蘇州人，家裏出身很貧苦的，早年參加中國共產黨，三十年代被捕成了叛徒，當了特務，汪偽時期又秘密投向潘漢年，做了些工作……
談起1949年那次饒漱石見胡鈞鶴，王征明說：
饒的思路現在看來是相當開闊的，實際上願意跟他（胡）談談，但又不好直接見他。於是由揚帆設計，饒裝成到社會工作部來串門，一推門，胡鈞鶴就坐在那裏，看起來像是偶然碰到的。見麵後坐在那裏談談，希望他立功自贖。後來華東社會部將這個情況報告中央社會部李克農，中央社會部表示同意。用胡（鈞鶴）的理由是：一是上海情況複雜，二是用特務他們比我們了解敵內敵陣的情況。用饒的話說：“汪精衛特務，很多吃過國民黨特務的官司，要利用敵人的矛盾。”饒還指示公安局，可以叫胡搞個情報委員會，放在公安局的外邊，稍後胡是主任，徐漢光是副主任，還有一個秘書孫洵。並未列入公安局編製，未享受幹部待遇，他們的生活補貼由特費中開支。進上海沒多久，胡跟揚帆彙報，說他們這個委員會已聯係到一些人了，還有個少將自首了。饒漱石一聽很高興，進一步發揮說：“國民黨過去就是用顧順章把我們地下黨搞垮的，我們這麼搞，也以其人之道還治其人之身。”（那時）原來的上海小報《鐵報》還在，該報登出萬德全自首的消息。饒漱石一看這個，馬上告訴揚帆：“這第一個自首的不能殺，殺了以後再沒人來自首了。”
王征明談到他們剛進上海時，他所在的公安局社會處全班人馬隻有126人，麵對這麼大的上海，他們無法完成抓捕敵特及其他犯罪分子的繁重任務。他回憶道：
有兩件事我記得很清楚，一件事是由於人手不夠，我曾通過錢明（社會處副科長）請他找“特科”老人宋再生（浙江人，紅幫大哥，陳賡得力助手，曾打入淞滬警備司令部任密查員，報告出賣李維漢和李立三的叛徒，二奸後被我除掉），他曾是黨員，立了大功，後來失去了關係。我說你把你的那些徒弟帶來幫我捉人。他於是帶了幾個紅幫年輕人來，但沒用上。再一個就是叫周佛海的兒子周幼海（周之友、中共地下黨員），請他家的兩個打雜看門人（原周佛海稅警團的連排幹部）來幫我捉人。揚帆在上海市委會上彙報社會處幹部不夠，要求解決，饒漱石回答：“幹部不夠，告訴你幾個辦法，一是幹部從群眾中來，可以在工人學生中培養；二是過去的情報關係可以用，雖複雜一點，但可以用；第三特務可以用，用特務整特務，他要搞得過火一點不要怕，隻要我們掌舵的注意就行了。”
1951年羅瑞卿來上海檢查工作，說上海“以特反特”有成績，有缺點，有錯誤，和某地不一樣，上海破了案子，很多還是大案要案。二是發現問題立即究辦，上海的偵察工作是有銳氣的，今後工作不要縮手縮腳。那次羅瑞卿還專門去拜訪了饒漱石。羅走後，饒又補充了幾句：對特情人員“用上層不用下層；用於敵區不用於我區；秘密個別使用，不要公開的用”。王征明說：饒漱石這個“以特反特”的方法也不是他自己想出來的，化敵為我服務，以前也是這麼做的，中央也有這個精神。王說：
《用間》從來都是《孫子兵法》十三篇中最重要的一篇，這個厲害啊。（由於用間）上海的成績多大？我們這樣一來就造成蔣介石和汪精衛曆史特務的全軍覆沒，成績還不大嗎？你不用他們，你知道去哪裏抓啊？劉全德，誰把他抓住的？是高激雲、陸仲達，不就是胡鈞鶴手下的自首特務嗎？封企曾這個大特務，怎麼把他抓住的？都是我們用了人，用了“特情”朱崇文（朱岑樓）協助，“以特反特”才把他抓住的。還有那個朱山猿，誰認得他啊，那個殺手是國民黨少將級的，很厲害，我們用的也是軍統一個特務，他認得朱山猿，一看就知道是他，就把他逮住了。這麼大的成績，你有這個本事嗎？你根本就不認識他，怎麼抓？揚帆的偵察術或者說他的戰術，用他的話說，一為張網捕魚，一為見魚撒網。上麵說的台灣派來的這些凶悍的特務分子、殺手，便是因為碰上我們以特反特的網才一個個地被生擒活捉的。