歐內(nèi)斯特育有四子一女。大兒子克拉倫斯學(xué)習(xí)地質(zhì)學(xué)專業(yè)，后從事油品貿(mào)易行業(yè)。二兒子喬治是個(gè)化學(xué)博士，后來落腳在美國東海岸。四兒子弗雷德繼承了歐內(nèi)斯特?巴菲特的百貨商店。五女兒艾麗斯后來做了一名家政老師。

巴菲特父親霍華德是歐內(nèi)斯特的第三個(gè)兒子。他生于1903年，后入讀內(nèi)布拉斯加大學(xué)主修新聞學(xué)，并成為校報(bào)《內(nèi)布拉斯加州人日?qǐng)?bào)》的編輯。巴菲特母親叫利拉·斯塔爾，利拉的父親約翰·斯塔爾是好幾家學(xué)校的董事會(huì)主席，還買過一家叫《庫名縣民主報(bào)》的報(bào)紙。斯塔爾是典型的猶太姓，巴菲特母系家族是富裕的猶太商人。按照猶太人遵從母系的角度來看，巴菲特也可以被看成是猶太人。只是這一點(diǎn)被人們有意無意地忽略了。

美國國父之一漢密爾頓曾這樣評(píng)價(jià)過美國猶太人：“金錢是他們的偶像，他們不僅口頭上，而且整個(gè)身心都崇拜它。在他們的眼里，塵世無非是個(gè)交易所，而且他們確信，在這塵世間，他們除了要比自己鄰居富有之外，沒有別的使命。做生意占據(jù)了他們的全部思想，變換所經(jīng)營(yíng)的貨品，是他們唯一的休息。他們?cè)诼眯械臅r(shí)候，也要背上，比如說，自己的貨物或柜臺(tái)，而且所談的不是利息就是利潤(rùn)。即使他們一時(shí)沒考慮自己的生意，那也只是為了要探聽一下別人的生意做得怎樣。”巴菲特守財(cái)奴的個(gè)性，對(duì)金錢的瘋狂追求，無疑受到其母系家族的影響，那都是典型猶太人價(jià)值觀的體現(xiàn)。

20世紀(jì)20年代，美國經(jīng)濟(jì)一片繁榮，股價(jià)像坐火箭一樣直沖云霄。1927年，霍華德進(jìn)入金融行業(yè)，在聯(lián)合州立銀行做股票經(jīng)紀(jì)人，收入頗豐。但好景不長(zhǎng)，經(jīng)濟(jì)大危機(jī)爆發(fā)，聯(lián)合州立銀行于1931年8月13日破產(chǎn)倒閉。

當(dāng)時(shí)，在美國東北最繁榮地區(qū)，各名牌大學(xué)的應(yīng)屆畢業(yè)生都難找到工作，連在紐約百貨公司開電梯的工人都必須要有學(xué)士學(xué)位。威廉·曼徹斯特在《光榮與夢(mèng)想》中這樣描繪當(dāng)時(shí)的失業(yè)狂潮：“那位衣冠楚楚、每天早上按時(shí)出門的青年律師，說不定是揀個(gè)偏僻地方去挨戶兜售雜志、便宜領(lǐng)帶、真空吸塵器、高壓鍋、‘二合一’牌鞋油之類的東西的。他甚至可能干脆換一套破衣服，在另一個(gè)市區(qū)向路人行乞。人在街頭流浪久了，也能找到一些竅門。譬如，花五分錢要一杯咖啡，然后白要一杯開水，把柜臺(tái)上的番茄醬倒一些同開水一攪和，就算是番茄湯了。冬天，報(bào)紙塞在襯衣里邊是可以御寒的；如果料到在職業(yè)介紹所外面要排上幾個(gè)鐘頭的隊(duì)，事先用麻包片把腿包扎起來就是了。鞋可是個(gè)特殊問題。硬紙板可以襯鞋底，有些人還喜歡在鞋后跟墊上棉花，走水泥地少硌腳。但是如果一只鞋子真的完蛋了，那就什么辦法也不中用了。最先磨破的是紙板，接著是襪子補(bǔ)丁，于是雪水滲進(jìn)鞋里，糊滿了腳丫子，加之鞋釘直扎腳跟，結(jié)果只好用一種特殊的姿勢(shì)走路。窮人家為了省錢度日想出的種種妙法，說來真了不起。男人的刮胡子刀片磨了再用；自己動(dòng)手卷紙煙，要不就抽‘翅膀’牌(一角錢一包)；為了省電，改用25瓦燈泡。孩子們撿汽水瓶到鋪?zhàn)永飺Q錢，一個(gè)兩分；上面包店排隊(duì)買隔夜的面包?！?/p>

如果巴菲特家族只是普通貧民階層，霍華德所能接受的命運(yùn)免不了是“加入了在曼哈頓街上擦一次鞋得五分錢的七千‘鞋童’的隊(duì)伍”，或是“插手走私運(yùn)煤的勾當(dāng)（紐約市10%的煤是由賓夕法尼亞州的失業(yè)礦工偷運(yùn)進(jìn)來的）”，抑或干脆“只是混跡在市內(nèi)那82條長(zhǎng)龍里領(lǐng)面包度日。如果身邊還有一角錢，還可以在充滿汗臭和消毒藥水氣味的小客棧里睡他一宿；如果身無分文，就在街上撿些報(bào)紙當(dāng)作鋪蓋，到中央公園、地下鐵道站口，或垃圾焚化場(chǎng)去過夜了。做丈夫的這樣出去走了一趟之后，鉆進(jìn)空貨車或者趴在車底下，又回到家里，不免同妻子合計(jì)，看看家底子還能維持多久。于是變賣結(jié)婚戒指，抵押家具，憑人壽保險(xiǎn)單借錢”。即便霍華德找到工作，也不過是像當(dāng)時(shí)《時(shí)代》周刊所說的被“無法無天的雇主把工資壓低到中國苦力的水平了”。

畢竟出身于富裕家庭，失業(yè)不到兩周時(shí)間，霍華德和兩個(gè)合伙人就在奧馬哈法納姆大街的聯(lián)邦州立銀行大樓成立了一家股票經(jīng)紀(jì)行，名字叫巴菲特-福爾克公司（Buffett-Falk&Company）。當(dāng)巴菲特父子商店以周薪17美元聘請(qǐng)一位司機(jī)開橙色卡車運(yùn)送貨物，竟有50個(gè)男人排隊(duì)競(jìng)爭(zhēng)。當(dāng)普通平民在這場(chǎng)經(jīng)濟(jì)大災(zāi)難中煎熬時(shí)，霍華德反而因禍得福，憑著有錢的親朋好友的幫助，將生意做得越來越紅火，收入比在銀行工作時(shí)還要高得多。后來，霍華德在回憶那段歲月時(shí)說過，“即使是在艱難的日子里，我們的生活水平也在穩(wěn)步地提高”。