李綱夫妻在李家坊過著男耕女織的田園生活，他真正領會了陶淵明為什麼說桃花源裏可耕田的深刻蘊意了。呂慧也十分向往這樣的日子，在李綱為官的日子裏，哪天不是提心掉膽的啊，丈夫當官的日子甚至還不如貶謫在外的時間長，而現在能真正過著那夫唱婦隨的生活。他多麼希望這樣的生活能夠長久啊！想到此她吟起陶淵明的《歸園田居》：種豆南山下，草盛豆苗稀。晨興理荒穢，帶月荷鋤歸。道狹草木長，夕露沾我衣。衣沾不足惜，但使願無違。
在說李綱回家一年有餘，這天他正在準備寫奏疏再次向高宗陳述自己的抗金主張，和抗金策略的時候，忽然有人來報說韓世忠所部在建洲（今建甌）要大肆屠殺範汝為的起義軍餘部，附近府郡的幾位通判們想起了李綱，就快馬加鞭地把李綱送到了韓世忠帳中。此時的韓世忠已經接到高宗的殺無赦之命令。李綱見到韓世忠就大步上前質問道：“你等且做那潛善皆不敢為之的事情。就不怕後人戳你脊梁，罵你傷天害理、作惡多端、滅絕人性嗎？”韓世忠便拿出皇帝聖旨說道：“我等也不是殺人狂徒，足有上萬人啊，可是聖旨在此，誰敢違抗。李相為人乃我等之人楷模，要麼我再次奏與聖上，希望他改變屠城之令。”李綱見還有希望，就斬釘截鐵地對韓世忠說道：“就說我李綱之意見，要他收回成命。事後李綱願意接受任何懲罰。”
這範汝為的父親原是個帶有武裝的私家鹽販，被捕入獄而死，他手下徒眾都依附範汝為。建炎二年（1128年），金兵南侵，宋高宗逃到杭州，敗兵四散，加上兵變，遠近地方遭受禍害，殃及建州。當時官吏不僅不加安撫，反而乘機苛剝百姓。在宋朝政治腐敗，官逼民反的形勢下，建炎四年七月，範汝為在土回源洞聚眾起義，不到一個月起義軍就發展到10萬多人。宋朝廷多次派兵圍攻，都被擊敗。當年11月，宋廷恩威並重，範汝為接受宋廷招安，仍統率原農民起義軍駐紮建陽屯田。宋紹興元年（1131年），一月，建陽劉時舉領導農民起義，在鎮壓農民起義的同時，宋廷要求範汝為遣散民軍，範汝為拒不接受。十月，範汝為再次起義，擊敗宋廷軍隊，占據了建州。
宋廷派韓世忠為宣撫使，統兵8萬進攻汝為，鳳凰山一戰，範汝為潰敗，退保建州，閉城固守，韓世忠雲梯火樓日夜並攻，範汝為堅守五日，終因勢單力薄，城被攻破，範汝為逃回土回源洞自焚身亡。
高宗派信使傳達了他的旨意：鑒於主帥已亡，大多之人皆是受人鼓惑走上反路成為逆賊。今有李卿之保，在者力顯我朝之仁義，故而遣散為之也。韓世忠接到聖旨後將各地起義人員遣散回去。這裏的義軍基本上是閩北各地，光是建洲就有半數之多。李綱冒死一諫，救了建州數十萬百姓，這天的紫芝山芝草在閃閃發光，因為大家認為芝草是瑞草，出現芝草是吉祥的象征，後來人們就把建甌城稱為芝城。所以宋、明、清三朝，建甌百姓尊李綱為“芝城之父”，立祠塑像祀奉。