許多公司當然不會跟這些人起哄，他們在處心積慮地利用兼並一些低市盈率的公司來製造每股贏利大幅增長的假象。投資大眾並沒有巴菲特的智慧，所以全被這些假象所蒙蔽，不斷推高股價。
投機成功的案例越是多，巴菲特就越是保持著他那理性的，幾乎是機械性的“安靜”性。沒有人知道，他那不同尋常的自製力是從哪裏來的，隻是知道，他就是靠著這不同尋常的自製力使他明白隻要他的既定目標保持不變，他就會感到壓力而不斷地刻苦奮鬥。
整個股市已經開始慌亂，巴菲特的心也開始不平，因為他已不能找到足夠的符合自己標準的股票了。密切注意著股市的每一個動向的巴菲特陷入了沉思。
潮起潮落本是事物發展的規律，股市也是如此，瘋狂的投機時代到達頂峰時，馬上回落，股票市場又跌入了深淵。許多人開始轉向，把注意力轉移到短期投資上來。對股市這種沒有規律的變化人們都在預測著，分析著股市的走向。而巴菲特則盡量避免對它進行預測，也決不按大家的觀點去買進賣出，迅速更新手中的股票。他願意堅持自己的投資習慣，去分析單個公司的長期商業前景。
巴菲特的家人以及朋友對他的這種長期持有的投資策略很是不解，合夥公司開始起了爭議，他的家人和朋友都希望他出手，他們認為當時基金經紀人的投資組合是很正確的，基金經紀人的投資組合是不斷地在那些大企業之間進行多角化風險分散，其目的很大程度上是為了保證自己，以免跟不上市場，並不是因為他們意識到這些大企業有好的經濟形勢。
巴菲特不想預測市場，不過，在家人以及朋友的催促下，他還是在自己辦公室的牆上貼滿有關1929年危機的剪報。他並非是想違反自己的投資主張，而是要時時提醒自己。他預感到，這一切最終要化為泡影。後來，他說道：“股票市場正處於高度投機的氛圍之中，真正的價值在投資分析與決策中所起作用越來越小。”他告誡自己：股市狂升時要避而遠之。
躲避不如身退，這是巴菲特在經過長時間冷靜的思考後得出的結論，於是，1969年5月，巴菲特決定結束投資合夥關係，他宣布隱退。用一年的大部分時間進行清盤工作。他不希望因參加自己不理解的遊戲而使自己很優秀的業績受到損害。
要知道此時的巴菲特合夥公司已經頗具規模，許多股東們對他的這一決定大為惱火，即使他的家人與朋友也很是生氣。許多人都質問巴菲特為什麼不在賺錢的時候多買些高科技或電子類的股票。巴菲特很平靜地告訴這些人，在華爾街投機風氣正濃的時候，充分發揮自己的潛能這種遊戲是非常有賺頭的，這些高科技、電子類股票確實會繼續上漲。但是，巴菲特說自己對這些股票並不熟悉，不熟悉的事情，他不做。他同時還說道：“但是在一點上，我是清醒的：我沒有放棄輕而易舉可以得到的利潤來接受一種我沒有完全理解，沒有成功地應用於實踐，以及可能會導致資本產生重大且有永久性損失的方法。”
結果隻能是，投資者無奈收回了自己的資本份額，大家各自發展去了。一些投資者轉投市政債券，而有些人則由巴菲特推薦給了一位基金管理人。剩下的其他一些成員都是相信巴菲特可以歸來的人，他們選擇了股票，把資產轉至1962年收購的伯克希爾·哈撒韋公司，形成了新的合夥關係。
後來，巴菲特說：“我覺得兩種證券都是非常體麵的長期持有工具，而且我很高興自己的淨財產中有相當大的一部分投到它們（伯克希爾·哈撒韋和戴維斯菲爾德零售店、服務連鎖企業的控股公司）當中去。”當他們正準備收購伯克希爾時，他希望他的合夥人在考慮伯克希爾時，把它當作是一個企業，而不是一種“股票”。
巴菲特在新的合夥公司中的股權增至2500萬美元，足以控製公司。在此後的20年裏，巴菲特與伯克希爾的財富雙雙飛漲。
巴菲特的成功歸結於他的直覺，這種直覺並非是一天所能訓練成，也並非是每個人都可以擁有的。巴菲特經受了華爾街“買空賣空”的感性折磨，度過了一段相當困難的時期，他堅決拒絕了投機。
那麼，錢在手裏不花隻是數字而已，又不想投機：“我隻知道當我60歲時，我將會盡力去實現一些個人目標，而這些目標與我在20歲前訂下的目標是不同的。”他想追求一些不僅僅是為了賺錢的利益。