由羅大綱帶領的先鋒部隊，冒著風雨取道古蘇衝口出圍。古蘇衝在州城東十八裏的龍寮嶺下。衝口有玉龍關為第一險要處。向榮以為此處險要，無須重兵把關，隻派了七十歲的已革參將王夢齡帶三百兵丁把守。羅大綱軍繞道而行，從關後殺人，迅速占領了玉龍關，繳獲了十多擔火藥，充實了軍資。爾後，中路大軍洪秀全等順利地通過了古蘇衝口，攀上龍寮嶺，走向昭平大峒而去。但由州南水竇村撤出，作為全軍殿後的秦日綱軍進入古蘇衝時，就為清軍烏蘭泰部追及，雙方發生激戰。當晚，秦日綱軍撤出玉龍關，走平衝。翌日，烏蘭泰追擊中發現太平軍在平衝峽穀中行進，就分軍搶占龍寮嶺兩側高地。平衝峽穀全長七裏，古樹參天，荊棘叢生，秦日綱軍因掩護老弱婦孺，行軍緩慢，適逢大雨，路更難行。清軍居高臨下，直撲峽穀。太平軍進退維穀，所護家小全遭殺害，人數多達二千餘人。這是金田團營以來，太平天國人員遭受最多的一次損失。
賽尚阿得到捷報，催令向榮、和春、邵鶴齡、董光甲、長瑞、長壽等各路人馬一起向龍寮嶺追擊。
洪秀全等此時已翻過龍寮嶺駐紮在昭平縣境仙回嶺。得悉，後軍損失慘重，為擺脫追軍，決定采取誘敵深入，在伏擊中殲滅敵軍。太平軍主力分三路出擊：北路直插龍寮坳，待追軍過，斷其歸路；南路在旱衝口用木石堵塞，作為圍殲追軍的主陣地，中路上黃草嶺，居高臨下。正麵阻擊追軍的來路；還在追軍行進的兩側山頭搭起擂石滾木，布下長長一線的天羅地網，等待追軍進入圈套。
烏蘭泰軍奮疾先行，其餘各支人馬緊緊跟上，利之所在，趨之若鶩，都是為的要爭頭功。8日清晨大霧迷漫。清軍翻過龍寮坳進入太平軍伏擊圈時，頓時兩側山峰上擂石滾木傾盆而下，追軍本已疲憊不堪，加之山路濕滑。人馬擁擠，難以展身。說時遲，那時快，雄赳赳的太平軍將士，腳踏芒鞋、手持短刀，分幾路衝出山坳，殺奔前來。狹路相逢勇者勝。追軍早已無回手之力，未經交鋒，趁快逃命。烏蘭泰見勢頭不好，回馬就逃，在親兵保護下，躲進深溝，僥幸沒有斃命。四個實授總兵：邵鶴齡、董光甲、長瑞和長壽，都被殺死。一場伏擊戰，競打死了四個正二品大員，這在嘉道半個世紀裏的戰場上是罕有的事。因此耳聞此事的狀元龍啟瑞有詩哀歎說：
“將卒自顛隕，血肉盈溝坑，桓桓四將軍，斷膃歸天閶。”
龍寮嶺伏擊戰，清軍正規部隊被殺死達五千人。這是太平軍自“迎主之戰”以來，曆盡數十仗中最為輝煌、殲滅敵軍最多的一仗。它的意義還在於完全擺脫了自與清軍作戰以來受圍受堵的被動格局，而轉向主動進攻。當時在軍中的李秀成深有認識，他後來說道：“自殺勝之後，東王傳令，不行昭平、平樂，由小路過牛角瑤山，出馬嶺，上六塘、高田，圍困桂林。”（《李秀成供詞》）
太平軍先派出一支小部隊，穿著繳獲的清軍衣甲，打著清軍旗號，由小路兼程前去誘取桂林。主力部隊取道荔浦、陽朔，北上桂林。
桂林，當時是廣西省城，是洪秀全、楊秀清的戰略目標。當時他們常提及的“小天堂”所在地，還沒有具體指明是何地，是否就是桂林呢？
桂林／口有廣西巡撫鄒鳴鶴獨自坐守。向榮畢竟老奸巨滑，他從龍寮嶺脫圍後行軍至陽朔金堡墟的玉龍橋時，發現有一支清軍形態異常，尋思此必是太平軍喬裝，遂由小道疾趨塘頭，在到達桂林西南五十裏的會仙時已深夜了，稍稍休息，即帶領八名騎兵連夜馳行，至清晨四時由桂林西門入城，即傳令封塞南門，增加守備；而喬裝清軍的這支太平軍行至六塘，因天色已晚，沉耽於休息，就地紮營，清晨始行，比及到南門橋，見城門緊閉，城上旌旗林立，遂群相大呼：“向大人回城了，快快開城。”忽然城上一陣呐喊，一個清軍裝束的將官出現於城樓，也大呼：“我老向早回來了。”
陰差陽錯。要是這支太平軍將士有點時間學觀念，他們如趕在向榮之前，桂林是否能打下呢？他們又一次丟掉了良好機遇。
桂林攻城戰開始了。
太平軍在主力來到後，對桂林采取圍攻，並在城東南象鼻山上架炮隔江轟城。
烏蘭泰自龍寮嶺敗後，以為太平軍北走，必是圍攻桂林，即又決意兼程追趕，率領餘部七百人尾追，幾天後馳至桂林南門外二裏的將軍橋。太平軍據橋為守，烏蘭泰奮力策馬過橋，被炮子擊中膝蓋，送治無效，傷死於陽朔軍中。烏蘭泰號稱良將，被時人稱為在廣西兩年戰役中，唯一能真心盡力作戰的將領。
這時賽尚阿坐守陽朔，不敢進入桂林。但因各路清軍多有進入桂林，驟使守軍增至二萬人。太平軍架炮攻城，造以雲梯攀登，守軍以滾油澆下，未成；又特製呂公車攻城。車以大竹製作，寬長丈餘，下用四輪，中貯火器。外施板障，上排雲梯，高與城齊，數十人踞其上，得以貼近城牆麵而采取平攻，並配備火焰噴筒以殺敵。守軍以長竿縛火種燒車，又擲火燒車，呂公車多被燒毀。
太平軍因圍攻桂林已過一月，未能攻下。5月19日夜，在象鼻山束草像人，大炮置藥線用長繩自遠處控製發放。清軍遙聞炮聲，又見山上人跡，不疑他們全軍潛去，那知太平軍卻是分水陸兩路，北上經靈川、興安去了。