公孫瓚自認為童謠所說的地方是指易縣，就把自己的大本營遷到那裏，在周圍挖掘了十道塹壕，在塹壕內修築許多土丘，每座土丘都有五六丈高，在上麵建起高樓。在中央有一個最高的土山，達到十丈，供公孫瓚自己居住。
公孫瓚以鐵為門，左右侍衛全被隔在門外，七歲以上的男子不許入內，隻與姬妾同住。文書、報告等都用繩子吊上城。他又命令婦女練習放大嗓門，使聲音能傳到數百步，以便向其他城樓傳達命令。
公孫瓚於是疏遠賓客，沒有親信；部下的謀士與猛將逐漸離散。而且從此以後，公孫瓚也很少再出外作戰。
有人問起原因，公孫瓚說：“我從前在塞外驅逐胡人部落，在孟津掃蕩黃巾叛軍，那時，自認為可以憑借自己的能力，平定天下叛亂。但到了今天，戰亂才不過剛剛開始，看起來，大局並非能夠由我決定。因此，不如讓士兵們養精蓄銳，努力耕作，以渡過荒年。兵法上講：百樓不攻。如今，我的軍隊分駐各樓，有深塹高樓數十重，存糧食三百萬斛，吃盡這些糧食，足可以看到天下局勢的變化了。”
二月，曹操在兗州站穩腳跟後，開始向外擴展勢力。當時汝南郡（今河南上蔡西南）、潁川郡（今河南禹縣）黃巾軍何義、劉辟、黃邵、何曼等部，各有兵數萬。曹操率兵進擊，在許縣一帶擊破何曼軍，飛天夜叉何儀率部將何曼從曹操的包圍中救出，投奔劉辟而去。劉辟接到台駘的命令，暫避曹操兵鋒，靜等冀州軍的到來。
曹操隨即乘勝攻中許縣（今河南許昌），勢力發展到豫州（今安徽毫縣一帶），曹操軍隊實力也有所增強，漢廷拜曹操為建德將軍。從此，曹操和袁紹盡分兗、豫之地。
呂布和陳宮等人東奔劉備，呂布屢戰屢敗，已經淒惶不已，不複當年雄風，見到劉備後，愴然說道：“虎牢一別六載，你還是當年的你，我卻比之原來的我更加不如！”
劉備道：“奉先今日既來投我，諸般事情，便可從長計議！隻是奉先如何淪落至此？”
呂布道：“我本想謀得一席之地，整備軍械，向西進攻李傕、郭汜，救漢帝於犬牙之間，怎奈有心無力。這些年來我左奔右突，出長安，走武關，奔揚州，去汝南，戰於毒於穰山，結張邈於陳留，投張楊於河內，拒曹操於兗州。
可是天下之大，幾無漢室與我呂布容身之地啊！”
劉備默然，良久，欷歔道：“備又何嚐不是如此？眼看各地諸侯，弱者愈弱，強者愈強，心向漢室者非死即亡，漢室威嚴一掃而光。
而我等年將不惑，日夜想挽救漢室於傾頹之間，窮極思慮，鬢白發蒼，自保尚且不可，何談出兵勤王？到如今隻恨自己無能，隻恨自己無能啊！”
呂布狂笑道：“哈哈，無能？無能！我呂布一向自詡天下無敵，卻原來是不願意相信自己的無能！比之玄德，我如今不能為漢室守衛一寸土地，身邊將士不足三千，我能為漢室做些什麼？
我當初殺掉丁建陽，讓董卓老賊肆無忌憚的毀敗朝廷，又不能及時勸阻王允，使得長安洛陽到處充斥著散兵遊勇，讓漢帝歸無所歸，讓漢臣孤懸四地，這一切的一切，都是因我呂奉先而起啊！
為什麼？為什麼！我所做的一切，都要和我的初衷背道而馳嗎？
為什麼！為什麼？這世界要將我所有的夢破敗，而它從來就不會有一絲同情！我隻好像一塊石頭一樣的翻滾嗎？我隻能這樣承受所有人的誤解了嗎？”
劉備淒愴一笑，舉杯朝呂布說道：“將軍不必如此，是非自在人心，如果每個人都能理解你，那你得普通成什麼樣？”
說罷，二人對酒當歌，唱道：“起來，無名的士兵，作決死鬥爭，讓正義的憤怒像巨浪，滾滾沸騰！衝鋒，勇敢的士兵，拿起槍和矛，為了這偉大的國家，化身長城！”