結(jié)束了官宦生涯的劉良，回到舂陵務(wù)農(nóng)。雖然按當(dāng)時的制度，劉欽和劉良都有資格享受朝廷的退休津貼，無奈級別太低，朝廷發(fā)的那幾兩碎銀根本不夠一大家人操持吃喝的。就算劉良不說，劉家三兄弟心里也是明白的，叔父對他們已經(jīng)夠照顧的了，總不能靠叔父一輩子。

父親不在了，作為長子的劉縯理應(yīng)挑起生活的重?fù)?dān)，但劉縯生來有著遠(yuǎn)大的志向，他對于農(nóng)活沒有半點(diǎn)興趣，最大的愛好是結(jié)交天下豪杰，喜歡暢談天下大事，不屑于料理家中的田地。家中所有的農(nóng)活便只能由二弟劉仲和三弟劉秀來承擔(dān)。劉秀知道大哥的性格，他了解大哥的遠(yuǎn)大志向，只好和二哥一起，默默地挑起生活的重?fù)?dān)，供著大哥在外面風(fēng)光。劉仲是個老實(shí)巴交的人，只會埋頭種田，其他的一概不管。

而劉秀從小就對農(nóng)活用心，很會照顧、打理田地，他家的田即使在大旱的年景也能有個好收成。劉秀雖然不像大哥每天只想著大事，他卻也不是真的只懂種田。他有非常好的生意頭腦，每次打完糧后，留下家里吃的，就趕著牛拉著糧食到周邊市鎮(zhèn)販賣。在當(dāng)時的年景下，糧食十分金貴。本來時局動蕩糧食比較緊缺，加上劉秀為人忠厚和善，做買賣誠實(shí)守信、價格公道，所以劉家的糧食銷路非常好。很快，劉秀就為家里攢下了一筆很豐厚的積蓄。劉家也慢慢從父親劉欽逝世的陰影中走了出來。劉秀不僅會做買賣，更重要的是他非常會做人，平時樂于助人，鄉(xiāng)里鄉(xiāng)親的誰家有困難，都會盡力幫忙，從不說二話。劉秀“品行純美，有君子之風(fēng)”，在當(dāng)?shù)刳A得了非常好的口碑，鄉(xiāng)親們一提劉家老三，個個都是贊不絕口。

那位“性剛毅，慷慨有大節(jié)”的大哥劉縯，卻從不管家計(jì)問題，只知道用僅有的一點(diǎn)家當(dāng)去招待各路豪杰，即使家里早就入不敷出，他也從不顧及。因?yàn)閯⒖t的志向非常宏大，他從心里瞧不起做農(nóng)活的營生，要知道他們可是漢高祖劉邦的后人，天潢貴胄，應(yīng)該出將入相、鐘鼎玉食，如今落到這個下場，心里怎么能平衡？劉縯每天都在幻想，有朝一日，他率領(lǐng)各路江湖豪杰，沖進(jìn)長安城，滅掉該死的王莽，重建大漢天下，也不枉費(fèi)自己身上流淌著的皇族血脈。

劉縯整日呼朋喚友，而結(jié)交總是需要花錢的。劉縯不事生產(chǎn)還常常大手大腳地花錢，這樣一來，只好找兩個弟弟要錢花。劉仲和劉秀對大哥非常尊敬，只要大哥開口，從來不拒絕。劉縯平白花著弟弟們辛苦掙來的錢，卻半點(diǎn)也不心疼。不僅如此，他還非常瞧不起這兩個“胸?zé)o大志”的弟弟，經(jīng)常數(shù)落弟弟，有次劉縯就當(dāng)著很多人的面挖苦劉秀：“我這小弟劉秀一直喜歡耕種,這樣也不錯，還能養(yǎng)家糊口，比起高祖的兄長劉仲也相差不多了?！泵鎸@個近乎無賴的大哥，劉秀從來都是尊敬的，無論他說什么，劉秀只是笑笑。

劉秀胸?zé)o大志么？當(dāng)然不是，只是他心機(jī)比較深，不輕易讓人知道他在想什么。劉秀也是漢家子孫，眼瞅著王莽倒行逆施，朝野上下一片烏煙瘴氣，百姓受苦受難，他何嘗不想恢復(fù)大漢天下，讓劉氏繼續(xù)站在歷史的頂端。只是劉秀看問題的角度和劉縯不一樣，他現(xiàn)在關(guān)心的是如何讓一家人吃上飽飯，如果都像大哥這樣整日不事生產(chǎn)，只是廣納賓客，自己家恐怕早就貧困不堪，母親、姐姐和妹妹恐怕都被餓死了。

雖然劉秀看起來整日侍弄莊稼，胸?zé)o大志的樣子，其實(shí)他的心中并不平靜，他何嘗不想做一番事業(yè)？他在操持農(nóng)業(yè)、販賣糧食的同時，一直都留意著當(dāng)?shù)氐睦糁?、政策等等，甚至也刻意去結(jié)交一些有勢力的人，比如坐鎮(zhèn)南陽的大司馬府納言、五威將軍嚴(yán)尤等人。劉縯想的，劉秀也想過，但現(xiàn)在還不是時候，他們手上無一兵一卒，拿什么去反抗王莽？現(xiàn)在還需要積累，于是劉秀作出了一個決定，到京城長安去求學(xué)。此時的官宦子弟不少都是走的這條路線，學(xué)習(xí)經(jīng)學(xué)，進(jìn)入太學(xué)，學(xué)滿后便有機(jī)會從政了，這是一條很好的做官途徑。畢竟劉秀不想永遠(yuǎn)做一個農(nóng)夫、糧食販子，他也同樣有著劉氏皇族的驕傲。