呂布為何看了高順的信那麼高興？因為高順在信中說並不接受朝廷的官爵，那封聖旨被扔到了垃圾堆，並且打算利用此事奪取沛城。呂布心結解開，哪能不滿意，便讓高順便宜行事，至於之前陳登所謂的試探早不放在心上。
高順營中，陳登前腳剛走，許汜就來了。許汜乃呂布帳下謀臣，並不怎麼受重用，官至從事郎中。此人雖然有些名氣，但風骨卻不怎麼樣，求田問舍，便是從此人身上出來的。
許汜受呂布調派來安撫高順，但一路走得甚慢，便被陳元龍後發先至。不過高順並不需要什麼安撫，隨意跟他寒暄幾句便打發他回去了。高順搖搖頭，自家主公心性不定，一會兒聽這個，一會兒又聽那個，耳根子軟到家了。
自從呂布放了夏侯惇，曹操有離間呂布君臣的心思，便讓樂進率兵退回許昌，好讓陳登多一些說辭，誰知高順根本不接受朝廷的官爵，呂布也因此心中大定，曹操這一著算是打在了空氣上，毫無作用，反而白送了呂布官職，不過總算換回了夏侯惇，也算有點價值。
劉備得知樂進退兵，心頭更是沉甸，高順陳兵在外，攻又不攻，退又不退，小沛城中日日警戒，弄得人心皇皇，士氣全無。再過幾日，不用高順來攻，這城的人心恐怕就散了。好在他還有些民望，還不至到守不下去的地步。他不知道曹操離間呂布高順的事情，每日就這樣得過且過，看高順能耐到什麼時候。
這日大早，高順開始令人拔寨收兵，返回下邳。劉備在城頭遙遙望見，心中奇怪，問左右關、張道：“高順這是要攻城了嗎？”關羽抬手遮眼看了一會，道：“不像，倒似要退兵了。”劉備一怔，不敢相信道：“退兵？不攻我城池了嗎？”忙細細看去，真有點像退兵的跡像。關羽道：“差斥侯去查探一番。”喚了親兵過來，教領五、六騎出去看看。五、六騎化作黑點衝向遠方，過了小半時刻又返轉回來，報與關羽、劉備，道：“高順軍正在拔寨，確實要退兵了。”劉備明顯鬆了口氣，道：“這廝終於要走了！”張飛道：“哥哥，何不引兵去抄掠一番，也好報前番之仇。”
劉備瞪了他一眼，道：“高順豈不防你？我軍多為新卒，未經戰陣，訓練又不及他，守了十多天城池，日夜戒備，早就疲了，哪有餘力去抄掠。要去你自個兒去，若能提得高順的頭來，再好不過。”張飛老臉一紅，訕訕作罷。
半日功夫，高順便引兵退得幹幹淨淨。劉備終是按奈不住，點了一支精銳人馬前往查看，來到高順營地，看了一會，心生感慨，謂關、張二人道：“古之名將，不外如是。”但見高順營地，紮得森嚴有度、鱗節枇次，前有豪溝拒馬，後有柵欄層層，將個營寨布置得無懈可擊。再觀其退去時，不疾不緩，從容不迫，該帶走的一樣也沒落下，這樣的將領怎麼就讓呂布得去了呢？關羽觀摩了一陣，受益菲淺，卻又暗感哪兒不對，想了一陣，猛然醒悟，對劉備道：“大哥，高順如此急忙退去，可是為何？莫非下邳出了變故？還得差人打探消息才成。”劉備亦醒悟道：“是極，究竟為何退兵，需得弄個明白，二弟這事就交給你了。”關羽點頭，喚來親兵，令去下邳城打探消息。
一日之後，有消息傳回，曹操並封呂布高順，離間二人，已是引起呂布對高順的猜忌，這才著陳元龍召回高順，並解了他的兵權。劉備兄弟得訊自是大喜，於是放鬆城池戒備，讓民眾出城打柴取水，又派人去下邳送禮給呂布，卑詞厚禮以寬其心。
陳珪父子也暗歎高順愚忠，竟然心甘情願失去兵權，隻好密報曹操，暗歎之餘也存心喜，心道此人雖不為曹公所用，但至少讓呂布不用他了，唯今之計，便是要配合曹公毀了那泗水寨。