第二天清晨，杜荷沒有告訴任何人，也沒有通知任何人，就帶著家人乘坐了四十幾輛馬車，裝滿了各種各樣的東西，向著長安城離去，浩浩蕩蕩的隊伍，緩緩的向著渤海而去，當眾人離開了長安，向著蒲州方向趕去的時候，身後忽然揚起陣陣煙塵，杜荷抬頭看去，當即騎馬趕了過去，隻見來人竟然是李世民的大內總管，杜荷微微一笑說道：“不知道總管來此所為何事。”
那太監微微一笑說道：“咱家是來傳陛下聖旨的。”
杜荷一聽，當即下馬跪在地上說道：“微臣接旨。”
那總管尖銳的聲音當即傳了過來，：“朕聽聞今日渤海王去往封地，沒有什麼可送的，就送王府眾位夫人珠寶玉石十箱，送給眾位孩子們崇文書院珍貴書籍十箱，希望孩子們能好好讀書，將來好造福一方百姓，另外特此渤海王朕的佩劍一柄，希望渤海王替朕守好渤海，高麗，欽此。”
宦官的聖旨大多都是文言文，杜荷聽了一個大概，好像就是這種意思，宣讀完聖旨後，宦官當即從身後小太監的手裏，雙手捧著一個寶盒，走到杜荷的身邊說道：“王爺，這就是陛下佩戴多年的寶劍，陛下說了希望你能用這柄寶劍護佑我大唐，另外陛下說了，王爺肯定會回到長安的，讓你多等幾年，陛下說了大唐離不開你。”
宦官這番話說完之後，杜荷有些莫名其妙，不知道這李世民到底喉嚨裏買的什麼藥，明明是他讓自己離開長安去往渤海封地的，可如今又說出這番話，這到底是什麼意思呢？
對於李世民的話，杜荷是想了一路也沒有想出個所以然來，久而久之杜荷索性也就不再去想了，從來沒有帶著家人像現在這樣外出，因此杜荷一路上攜帶者家人，遊山玩水好不攜意。
貞觀二十年，五月，杜荷終於帶著家人來到了李世民為自己建造好的渤海王府，城門處，薛仁貴，蘇定方，羅通，李君羨等已經整整齊齊的站在那裏等待著杜荷，當杜荷的隊伍緩緩走來的時候，四人以及身後的許多士兵當即跪在了地上，大聲高喊著：“屬下等拜見王爺，拜見眾位夫人。”
杜荷拉著長樂的手從馬車上緩緩走了下來，將眾人一一攙扶起來之後，杜荷看著自己這些兄弟們說道：“兄弟們，我杜荷又回來了，從今天起，我就待在這渤海不走了，希望各位兄弟們能好好的將渤海經營好，給我渤海的百姓們一個良好的生活環境。”
身後的士兵們聽說杜荷這一次回來了，就再也不走了，當即都激動的呀呀大喊起來，說實話，李世民給杜荷建造的王府當真是不錯，府門前兩尊雄偉的獅子，蹲在門前，讓人一看就知道這府上的人非富即貴，當然金燦燦的渤海王府四個大字，還是那樣的引人注目，這片房屋最少有五六十個房子，穿過弄堂之後，四周都是高大的建築，最中間的位置甚至有一個巨大的客廳，整整齊齊的擺放著五六十個桌椅，杜荷看到這裏，當即對身後的蘇定方等人說道：“這樣建造是不是逾越了禮製。”
蘇定方哈哈大笑著說道：“王爺，這可是當初軍師李績按照陛下的旨意進行建造的，要是有違禮製的話，那王爺也應該找軍師或者是陛下吧。”
杜荷一愣當即說道：“你的意思是軍師如今竟然在渤海？”
蘇定方哈哈笑著說道：“原本陛下是將軍師調往幽州做刺史的，但是軍師上了本奏折說，他已經習慣了渤海的生活習慣，因此，陛下便做主將軍師派到了渤海，你們兩人一個主管渤海，高麗等地方的軍事，一個主管這些地方的政務。”
杜荷聞聽此話，當即有些興奮的說道：“這樣簡直是太好了，那軍師如今何在呢？”
薛仁貴就哈哈笑著說道：“我們都以為王爺是昨天就該到的，因此昨天等了一天，軍師估計是等的乏了，因此，今天我們就沒喊他一起來。”
杜荷聽後也說道：“你們做的不錯，軍師如今年紀大了，有些事情，也是力不從心，你們多擔待一點，別什麼事情都去麻煩軍師，讓他多休息就好了。”
杜荷這番話說完之後，隻聽見一陣聲音從身後傳了過來，說道：“誰在哪裏說老夫已經年邁，做不成事情了。”