就這麼扛了一年，浙江省內嘉興、紹興各處重鎮失而複得，得而複失，反複拉鋸，仗打得越來越殘酷，很多地方老百姓逃亡一空，幾十裏不見人煙，王有齡手裏僅有的兩萬來人越打越少，漸漸支撐不住了。
到鹹豐十一年夏天，李秀成親自到浙江督戰，太平軍攻勢更盛。
和太平軍的二流部隊作戰，王有齡還撐得住，可麵對李秀成本人，老王打仗的本事就不夠用了。失守的城池再也無力奪回，直至整個浙西、浙北全部落入太平軍手中，杭州的糧道逐漸斷絕了。
隨後，諸暨、紹興、餘杭各地相繼失守，李秀成親自領兵打到杭州的大門口了。城裏頓時局麵大亂，所有人都盯著王有齡，隻要他稍一怯戰，很多人就準備棄城逃命了。
可王有齡畢竟不是何桂清。
老王這個福建佬兒是個厚道人，有膽量。雖然在當官這最後幾年他也學了點壞，有點兒“濕鞋”，可總的來說，他身上還有正氣。現在眼看太平軍殺到麵前，王有齡下了決心，與杭州城共存亡！
有這麼個官兒撐著，局麵就不會很快垮掉了。但是，會慢慢垮掉。
就在杭州逐漸陷入絕境的時候，忽然傳來一個驚人的消息：鹹豐十一年八月，湘軍攻陷了安慶！
安慶失守，長江門戶洞開，太平天國的都城又暴露在清軍麵前了！
得到這個消息，杭州城裏民心振奮（說實話，振奮得有點太早，畢竟安慶的勝利是遠水不解近渴）。王有齡也激動起來，就打算來個“錦上添花”，派部隊出城，咬著牙打一場硬仗，給杭州軍民再打打氣，助助威。
於是王有齡派人潛出杭州，聯絡駐紮在城外的綠營兵部隊，請他們拚一回命，和杭州城裏的部隊裏應外合，對太平軍展開一次有力的反衝擊！
很快，城裏城外的人馬商量妥了，準備動手。
這時候，王有齡把胡雪岩找來了。
這次反突擊能否得手，目前尚未可知。但即使得了手，也不可能把李秀成從杭州城下徹底擊退。人家太平軍是兵山將海，而王有齡手裏，能打仗的人已經沒有多少，杭州城陷入絕境了。
以太平軍的兵力，清軍沒有十萬八萬的人馬，解不了杭州之圍。可是想等來一支大部隊解杭州之圍，真不知要熬到何年何月。眼下杭州城裏糧食已經快吃光了，沒有糧食，仗就沒法打，所以王有齡希望胡雪岩能找個機會混出杭州，到上海去籌一批糧食。
依王有齡想來，上海是薛煥的地頭兒，老薛和老王都是何桂清的親信死黨，平時處得特別好，這個時候薛煥一定肯出兵出糧，幫王有齡一把。
不多說，能弄來一萬石糧食，兩千名士兵，就能讓杭州城多拖上兩個月。
有這兩個月，湖南曾大帥的湘軍，也許就趕到了。
在這個時候，孤身一人從杭州走到上海，這可難得很哪！
仗打到眼下這個份兒上，誰知道哪條路通，哪條路不通？胡雪岩一個商人，手無縛雞之力，出了杭州城，就像羊羔子進了狼群一樣。要是半路遇上潰兵，土匪，太平軍，那脖子上的腦袋還不如地裏的西瓜，說砍就給你砍了！
可胡雪岩眼都沒眨，立刻就答應了。
他必須答應，因為這是王有齡求他的事兒。老王跟他處了這麼些年了，對胡雪岩來說，王有齡既是朋友，又代表著“朝廷”。
朋友之請，得講義氣；朝廷之命，得表忠心！
於是胡雪岩回家收拾了個小包袱，同時告訴母親和老婆孩子：別吱聲兒，今天晚上會打一仗，如果太平軍退了，咱們就出城。