特務機關公然開設賭場引起了社會各界的強烈不滿。因為擔心對自己的形象不利，汪偽政府就一再要求李士群關閉他在上海開設的賭場。李士群卻每每都以為76號籌措經費為由而拒絕關閉，被逼急了，他就抖出周佛海也在上海開設秘密賭場，說隻要汪偽政府關了周佛海的場子，他也馬上自行關閉。汪偽政府見李士群如此強勢，也奈何不了他，最後搬出了日本人。李士群實在不想斷了這條財路，在日本人麵前也是同樣的說辭，日本人一怒之下就用武力接管了他的賭場。最後還是晴氣慶胤出麵說和，李士群才同意將賭場關閉。
除了賭場之外，76號對鴉片生意也要染指。比起賭博，鴉片更是巨大的財源，但這一塊的大頭都被日本人直接控製著，他們通過在中國尋找的漢奸商人，直接控製了蘇、浙、皖三省的鴉片生意，任何人都別想分一杯羹。
76號對日本人的禁臠自然是不敢妄動食箸，他們還沒有利令智昏到要去“太上皇”碗裏搶肉吃的地步。於是他們就把眼睛轉向了那些土膏行、售吸所等鴉片生意的下遊環節，讓手下的特務一個個去找這些行業的老板交涉，強行讓他們交“保護費”。這些小老板一個個都沒有多大的勢力，平時嚇唬嚇唬那些拿不出煙錢的老槍們還行，76號廟裏的神他們可是不敢違拗的，所以都情願花錢消災——反正這些錢還會由那些深患阿芙蓉之癖的大小煙鬼們給送來。也有個別不識相的，覺得自己的錢財不能這麼平白無故地就被拿了去，但反抗的代價是很高的，輕的是一通暴打之後再乖乖地交錢，重的則不僅生意做不下去，還被迫遠走他鄉。這些地方雖然不如那些賭場，能一下子交出大把大把的銀子，但因為數量眾多，所以這些“保護費”也成了76號的重要財源之一。
在當時的社會上，除了賭博和鴉片是暴利之外，毒品生意也是斂財的重要途徑。但是當時上海沒有人公開售賣毒品，所以76號就不能像敲詐賭場和煙館那麼坐收其成了。但隻要有大錢可拿，還真沒什麼能夠難倒這些特務的，他們直接在郊區開設了一家製造嗎啡的工廠，還在市區裏開了專門的店麵。他們前店後廠，自產自銷，玩起了毒品生意的一條龍。這個工廠一開，使得上海眾多癮君子都很“便利”地用上了嗎啡，這讓76號日進鬥金，也讓很多家庭妻離子散——李士群等人又造了大孽。
李士群等人為了生不帶來，死不帶去的金錢，公開支持賭場和煙館，直接生產出售毒品，雖然積財巨萬，但也一手製造了無數的人間悲劇。很多人因為76號所操縱的罪惡生意而不得不賣兒賣女，更有一些人為此丟了性命。76號成了吃人不吐骨頭的魔鬼巢穴。