楊林果真是一人前來。當他看到李淵他們二人時，眼神閃了一下，說道：“老夫雖然是隻身前來，不過李大人居然毫不猶豫就開了城門，老夫果然沒看錯人。”楊林打心眼裏不再對李淵有敵意，可是那聲“唐王”實在是叫不出口，便以之前在朝堂上的稱呼相稱了。
他們三人也不多客套，便去了會客廳。
剛剛坐定，楊林便長歎了一口氣，說道：“李大人，其實咱們之前在朝堂上還算是有些交情的，我就開門見山地說了吧。我生是楊家的人，死是楊家的鬼。所以，要讓我一起推翻隋朝、爭奪皇位，我是萬萬做不到的。不過……唉！眼睜睜看著天下蒼生困苦如此，真是讓我情何以堪！總之，我已經發下號令了，明日一早，我的大軍就會撤退回長安……”
李淵急忙問道：“靠山王，萬萬不可！你這樣一回去，楊廣那裏哪裏還保得住性命？！宇文化及這個奸賊一定會想方設法地置你於死地啊！”
楊林苦笑道：“君要臣死，臣不得不死！你也無需再勸，我已經都想清楚了。等回到長安後，我便請皇上恩準我告老還鄉。如若皇上不準……都是天意吧！我也不強求了。我言盡於此了，就先告辭了！”
說完，楊林便起身準備走了。
就在此時，門外通報太子求見。
李淵一愣，不知道建成有什麼事還要親自來到這兒。他看了一眼楊林，見楊林並沒什麼不滿的神色，便示意守衛讓太子進來。
李建成進來後，先恭恭敬敬地向靠山王行了禮，說道：“靠山王，我李建成一直極為佩服您的英雄氣概。這一次，您又救了全城百姓的性命，讓我更是刮目相看。我李建成無以為報，隻是想在您臨走之前敬一杯薄酒，聊表敬意！我先幹為敬！”說完，李建成便拿起一個酒杯來一飲而盡。
楊林對李建成此人不甚了解，不過李淵和李世民他卻是熟悉的很。因此，他也很自然地對李建成有一股好感。
他嗬嗬一笑，也拿起酒杯來幹了，說道：“好！虎父無犬子！喝完了這杯酒，老夫告辭了！”說完，便邁著步子走了出去，絲毫沒有察覺到李建成嘴角的一抹寒意。
楊林走後，父子三人談論起此事，都感慨萬千。
李淵說道：“唉，想當初在朝堂之上，我和楊林惺惺相惜，沒想到若幹年後，居然會發展到如此地步……唉，可惜又可歎！”
李世民臉色也是不大好看，為楊林這樣一個悲劇人物感到由衷地傷感。
可是，李建成卻撇了撇嘴，說道：“父王，兒臣不這麼看。楊林此人這麼厲害，若是一旦成為我們的對手，將是可怕的勁敵。今日他雖然暫時放過了我們，可難保沒有以後！若是那樣的話，我們可就是叫天不應叫地不靈了！”
李淵一愣，問道：“你這話什麼意思？”
李建成笑了笑，幽幽地說道：“也沒什麼，兒臣隻不過想斬草除根，杜絕隱患罷了！”