二叔家裏的孩子也不少，家裏是非常艱難。二叔與二嬸卻總是不斷操勞，為孩子們焦心，操心。
劉秀越來越感覺到自己整天無所事事，兄弟幾個，靠二叔勤苦養育，心裏有愧。
於是，他找來大哥，二哥，商議一同回到自己的家鄉，靠耕種家裏的那些土地，維持一家人的生計。
聽到孩子們的建議，二叔想了很久很久。他看見孩子們已經長大，已經能夠漸漸獨立，最後終於答應。
就這樣，劉秀在十二歲(公元6年)那年，就同兩個哥哥，告別二叔，重新回到了自己的舂陵老家，過起了邊讀書，邊當農夫的辛苦的日子。
12
一個炎熱的下午，沒有什麼農事可做。兄弟姊妹幾個人就呆在自家的莊園的樹蔭下，或嬉戲玩樂，或看書針織，忙著自己的事情。
突然，一個年老體衰，衣衫襤褸的老人不知從何處冒了出來。他穿過圍牆邊用竹條，荊棘編成的柵欄，徑直地鑽了進來，想討口水喝，以便解解自己的口渴。
姐妹們首先看見了，他們急忙掩著自己的鼻子，紛紛躲避：“臭死了哦！你是哪裏來的臭乞丐哦！怎麼跑到我們家來了？又老又髒的！你還不趕快走開！小心我大哥揍你！”姐妹們阻攔警告著老人。
老人見狀，就想離去。
大哥劉縯聽見聲音，急忙走出家們。他一眼看見老人闖了進來，就勃然大怒，馬上厲聲嗬斥：“你是什麼東西！竟敢不經允許，鑽進我劉家門來！還惹我妹妹們生氣！你是活得不耐煩了嗎？是想討打嗎？”
劉縯火冒三丈，就是一頓訓斥。說著，劉縯還怒氣衝衝地拿起一根竹竿，就想趕走那個又窮又渴的老人。老人見狀，急忙驚慌失措地蹣跚閃避。
劉仲急忙拉住大哥：“大哥，不要胡亂打人！你好好叫他走開，就是了！打傷人，可不好哦！”
“你懂什麼！二弟，你趕快給我讓開些！老子今天脾氣不好，就是想收拾人！”劉縯怒氣衝衝，一臉蠻橫。
劉秀在裏屋聽見吵鬧，他急急地跑出屋子，想看個究竟。
“大哥，怎麼回事啊？”劉秀急忙詢問爭吵的原因。
“小弟啊，這個老頭子沒有經過我們的允許，就隨意溜進了我們的家門！並且嚇壞了我的妹妹們！他難道是想偷我們的東西嗎？”劉縯解說道。不知為什麼，劉縯對小弟很是客氣。
老人急忙辯解：“哥兒們，姐兒們！你們不要誤會！小人是逃荒的！老人雖然窮得要命，但絕對不是想偷東西的人。大白天，誰人又有那麼大的膽子呢？小人隻是又累又渴了，想找點水喝，解決一下口幹舌燥的問題！”
“怎麼不敢呢？大白天還有搶人的呢
！”劉縯依然是一臉怒火。
“大哥，你不要憑空汙人清白！老人那麼大的年齡了，怎麼可能做賊呢？”劉秀為老人說情。
“還是小少爺明理！老人手無縛雞之力，怎麼敢呢？小人沒有經過少爺們允許，隨意闖進家門，是小老頭的不是！是因為小人頭腦混混，糊塗了。大少爺，你就饒了小人吧！”老人可憐巴巴地求情道。
“對囉，大哥！老人家隻是想找點水喝啊！你幹嘛趕別人走呢！
誰人沒有困難的時候呢？出門在外，不容易哦！現在兵荒馬亂，連年饑荒，活人不容易啊！老人家，你別理他們！現在，有我做主！
劉安哥，你趕快給老人家端點開水來！裏麵放點茶葉！走路困了，喝冷水不好啊！喝茶水解渴些！老人家，你一把年紀，就放心地歇歇吧！”劉秀好心地扶老人在小凳上坐下，吩咐劉安去端點茶水。
劉縯見小弟做主，有些沒趣，就躲進了家裏。
“好的，小少爺！我馬上就去！”劉安答完，就急急忙忙鑽了進去。
“小少爺，你真是太好了！好人啊！”老人感謝涕零地讚道。
“誰人沒有困難的時候呢？這點小事，算什麼呢？”劉秀邊陪老人喝水，邊和老人閑聊了起來。
“老人家啊，這麼大熱的天氣，你孤身一人在外，中暑生病了咋辦啊？沒有人照顧你嗎？”劉秀關切地問道。