李五跟趙三小姐的事兒很快在趙家後院傳了開來，趙爾豐一回家就聽到下人嚼舌頭，說他最疼愛的小女兒跟這個算命的年輕小夥子打的火熱，還準備私奔，震怒之下直接把趙三小姐嫁到了川西軍閥葛家，又將李五攆了出去。本來惜這小夥子有幾分才，可叫他把自己閨女搭進去，他是萬萬不願意的。
李五帶著二十兩銀子的盤纏，到處打聽趙三小姐的情況。打聽到趙三小姐已經嫁人之後，他直接去了葛家，問趙三小姐願不願意跟他走。
趙三小姐當時已為人婦，考量的是趙、葛兩家命途的息息相關，當時又懷著身孕，便忍痛拒絕了他。李五知道這輩子跟趙三便是錯過了，也滅了相守一生的心思，打算就在趙三小姐待著的地界兒找個營生做著，也好幫襯著趙三。
原本就這麼安安分分地過了好些年，李五時不時地還能遠遠看著趙三小姐幾眼，可趙三小姐也是個可憐人，她本來就是被迫嫁到葛家，生了兩個孩子後跟丈夫一起去了北平度假，沒多久日軍就進了城，日軍一個跟葛家接洽的佐長看上了趙三的美貌，直接暗殺了葛家全家，又將趙三強占了。也幸虧那天湊巧兩個孩子去北平同學家寄宿，躲過了一劫。趙三不甘受辱，死之前用頭上的簪子硬是將那佐長刺死了。可滿懷忿恨的趙三死後卻成了孤魂野鬼，陰司不知為什麼，也沒來勾她的魂，她就這麼懷著憤恨在世間飄著，不期然又遇見了拚命找她的李五。
她成了鬼，李五卻能看見她，為了給她報仇，李五拾起了他爹傳給他的捉鬼術。要將那惡貫滿盈的日軍佐長的鬼魂找到，讓他魂飛魄散。
神算李斷言過李五也不是那塊料，李五卻硬生生改了命，將一手捉鬼術用的嫻熟。死在某地的人，如果屍體不能回鄉，魂魄也不能回鄉。所以李五知道那佐長的鬼還在中國大地上遊走。他帶著趙三的鬼魂，滿中國地找那個死後不知飄到哪裏去了的日本鬼。
這麼一找，就是紅顏白發，趙三已成了鬼，陽間本就不能多待，又心中鬱結，覺得自己髒了身子，哪怕成了鬼也不能再跟李五在一起，不多久就魂飛魄散，直接湮滅了。
李五帶著她找那鬼子的時候，沿途捉了不少鬼，很快就拾起了他爹的名號，被人尊稱為李先生，可他窮盡一生，再也沒能找到那個玷汙了他一生所愛的日本鬼。
“我已經一百多歲了。”李先生蒼老枯槁的聲音在周衝耳邊緩緩響起：“我這輩子沒再娶，也沒想過有個一兒半女。我現在依舊時時想起她，可不就是緣劫麼。”
他一雙渾濁昏黃的老眼裏頭閃著周衝看不分明的情緒，說：“我跟你說這些，無非是覺得你像極了當年的我。哪管她已為人婦，哪管她心裏頭有了別人。最後她成了鬼都不願跟我在一塊兒，我就知道，她並不是完全介懷那場劫難，而是她已經成了葛家婦，又生了葛家子，心裏頭已經有了那人。哪怕是後頭幾年，我帶著她到處走，她也都沒再動情。這就叫命。”