但天底下沒有不透風的牆，這件事情還是被秘密地傳到了山口那裏。
當聽到這個消息，山口不但沒有因為失去了幾個部下而惱羞成怒，反而大笑不已，陰森森地說機會終於來了。
其實陳老四和賽西施以前的事情，山口也是知道的，也曾想找機會除去這個“情敵”，但陳老四畢竟在上海灘也是有勢力和背景的人，若是無憑無據就將他除掉，不但會激起上海灘當地華人勢力的反抗心，在軍部那邊他自己也不好交代。
而這次上天居然平白無故地掉下這麼個千載難逢的機會給他，若是不牢牢地抓住，隻怕連老天都不會答應。
於是，山口連夜召集隊伍，立刻派兵包圍了陳家。
而陳老四自從上次的事情後，也有意地加強了警戒，在陳家周圍都布滿了荷槍實彈的忠實部下。
山口顯然沒有料到這小小的陳家裏麵居然隱藏了如此多的兵力，而且個個裝備精良，訓練有素，因此雙方一經接觸後就打得異常激烈。
經過浴血奮戰，並失去了大量的弟兄們的性命之後，陳老四終於成功突圍了日本人的包圍圈，向西邊逃脫而去，但陳老四在這次突圍中不幸腿部中彈，因為治療不及時，以致留下了後遺症。
在成功地逃脫了日本人的追捕，陳老四不敢再回上海，就在外麵把他帶出來的錢財全部分給了活下來的弟兄們，便獨自一人去找他的幾個老婆。
但萬萬想不到的是，等待他的卻是人財兩空。
原來，他的幾個老婆分頭離開上海後，除了大老婆外，其他的小老婆居然在拿到大量的錢財後，各自帶著小孩遠走高飛了。
這讓陳老四暴怒不已，但偏偏又無可奈何，畢竟錢都分給她們了，現在人也走了，上哪找去？
等他回頭再返回去找他的大老婆的時候，大老婆也不見了蹤影，隻留下了一封信給他。
信上說因為她不願再過打打殺殺的生活，就自己帶著孩子去別的地方了，讓他找到其他的小老婆後好好過日子，不要再找她了。
這個結局讓陳老四陷入了萬劫不複的境地，身無分文的他幾乎什麼地方都去不了。
後來，他找了個機會混進了上海城，但等他回到陳家的時候，發現那裏已經被日本人占用了，根本沒有進去的可能。
隨後他又去了青幫的總部，沒想到他被日本人追殺的事情已經傳遍了整個上海灘，青幫不敢再收留他，早已找了另外一個人來代替了他在青幫的位置。
城裏到處都貼著畫有他人頭像的通緝令，青幫又不肯收留他，陳老四這時候可以說叫天天不應，叫地地不靈了。
陳老四總算體會到了以前賈三甲落魄的時候是什麼樣的滋味了，已在上海灘已經沒有了立足之地的陳老四最終也走上了賈三甲的老路——到處逃難。
在外麵到處流浪了幾年，陳老四無意中來到了源清村，顛沛流離了幾年的陳老四立刻喜歡上了這裏，便在這安了家一個人居住了下來，但他也不是白留在這的，族長要求他看守村裏的祠堂。
就這樣，陳老四獨自一個人住在了源清村，一住就是幾十年。
巧合的是，沒過幾年，賈老道碰巧也逃難到了源清村，發現陳老四居然住在這裏。陳老四向他訴說了自己的遭遇，賈老道唏噓不已，不停地感慨命運無常。
賈老道看到陳老四既然住在了這裏，幹脆也留在了源清村，與陳老四同住一個地方。
但賈老道在源青村住的一段時間裏，居然喜歡上了村裏的一個姑娘，而這位姑娘看到賈老道為人不錯，也是芳心暗許。
這兩人眉來眼去了一段時間，賈老道終於鼓起勇氣，向這家人提起了親。
可惜這家人看到賈老道是一個人無依無靠的，又沒有錢，因此不同意讓自己的女兒嫁給他，甚至還將女兒許配給了本村的一個走貨郎。
這讓賈老道萬分惱怒，失去理智的他在這兩人結婚的那天，拿了一把菜刀，直接上門去鬧這兩人的婚禮。
後來被眾人捉了起來，情緒激動的親戚們都嚷著要把賈老道活埋了。還是陳老四出麵，拚著被牽連的危險，求族長放了賈老道。
族長看到賈老道雖然行為惡劣，但幸好沒有傷到人，就下令驅逐賈老道，讓他永遠不許再來源清村。