電子發(fā)燒友網(wǎng)報道(文/李彎彎)近日,據(jù)知情人士透露,OpenAI近期已開始租用谷歌的張量處理單元(TPU),為旗下ChatGPT等熱門產(chǎn)品提供算力支持。這一舉措不僅標志著OpenAI首次實質(zhì)性地使用非英偉達芯片,更顯示出其正在逐步擺脫對英偉達芯片的深度依賴,在算力布局上邁出了重要戰(zhàn)略調(diào)整的一步。
OpenAI依賴英偉達GPU的算力支持
在人工智能飛速發(fā)展的當下,OpenAI作為行業(yè)領(lǐng)軍者,對算力的需求呈現(xiàn)出爆發(fā)式增長。以O(shè)penAI推出的模型為例,當推出參數(shù)規(guī)模達1750億的GPT - 3模型時,其訓(xùn)練消耗的算力相當于30萬顆CPU全年不間斷運行。這種指數(shù)級的算力需求增長,在2024年達到新高度,谷歌Gemini、百度文心一言4.0等多模態(tài)大模型的訓(xùn)練算力需求較上一代提升5 - 8倍,單個模型訓(xùn)練成本突破千萬美元大關(guān)。
在此之前,英偉達的GPU一直是OpenAI開展模型訓(xùn)練以及推理計算工作的核心依賴。英偉達GPU憑借其強大的性能,在AI板塊占據(jù)著主導(dǎo)地位,成為眾多科技企業(yè)進行AI研發(fā)的首選。OpenAI作為英偉達GPU的重要大客戶,長期通過與微軟和甲骨文的合作獲取英偉達芯片,用于模型訓(xùn)練與部署。
英偉達數(shù)據(jù)中心級GPU雖性能卓越,但在高負荷運行場景下也面臨諸多問題。其實際使用壽命通常為1到3年,高強度工作負載會使芯片老化加速,超高功耗壓力也直接縮短了芯片壽命,且故障率隨使用時間增加而上升。隨著AI技術(shù)的持續(xù)發(fā)展和模型復(fù)雜度的不斷提升,OpenAI對算力的需求愈發(fā)迫切,同時也在尋求更具性價比和可持續(xù)性的算力解決方案。
谷歌AI芯片展現(xiàn)出媲美英偉達B200芯片的實力
此次OpenAI租用谷歌TPU,無疑是在算力布局上的一次重大嘗試。谷歌在年度云大會上正式發(fā)布的第七代TPU——Ironwood,堪稱AI芯片領(lǐng)域的“性能怪獸”。這款專為推理設(shè)計的AI加速器,是谷歌迄今為止性能最強、可擴展性最高的定制AI芯片。與2018年發(fā)布的初代TPU相比,Ironwood的推理性能提升了驚人的3600倍,效率提升了29倍,這一性能飛躍使其足以與英偉達的B200芯片相媲美,甚至在某些方面略勝一籌。
Ironwood在多個關(guān)鍵指標上表現(xiàn)卓越。功耗效率方面,相比第六代TPU Trillium,實現(xiàn)了2倍的提升,比初代Cloud TPU高出近30倍,谷歌的液冷解決方案和優(yōu)化的芯片設(shè)計,使其在持續(xù)、繁重的AI工作負載下,能維持高達標準風(fēng)冷兩倍的性能。
高帶寬內(nèi)存(HBM)容量上,Ironwood芯片搭載了高達192GB的顯存,是Trillium的6倍,能夠處理更大的模型和數(shù)據(jù)集,減少頻繁數(shù)據(jù)傳輸?shù)男枨?,進而提高性能。HBM帶寬提升到了7.2Tbps,是Trillium的4.5倍,極高的帶寬確保了快速的數(shù)據(jù)訪問,對現(xiàn)代AI中常見的內(nèi)存密集型工作負載至關(guān)重要。
芯片間互連(ICI)帶寬增強,雙向帶寬已增加到1.2Tbps,是Trillium的1.5倍,這種芯片之間更快的通信,有助于大規(guī)模高效的分布式訓(xùn)練和推理。
對于谷歌Cloud客戶,Ironwood可根據(jù)AI工作負載需求提供兩種規(guī)格——256芯片或9216芯片。每個單獨的芯片峰值算力達4614TFLOPs,當擴展到每個pod 9216個芯片時,總計達到42.5Exaflop,其算力是世界上最大的超級計算機El Capitan的24倍以上。
總結(jié)
OpenAI租用谷歌AI芯片這一舉措,無論是對OpenAI自身,還是對整個AI芯片市場,都具有深遠意義。對OpenAI而言,這有助于其擺脫對單一芯片供應(yīng)商和數(shù)據(jù)中心的高度依賴,在算力布局上獲得更大的靈活性和自主性,降低算力成本,為業(yè)務(wù)的持續(xù)擴展提供有力支撐。對于AI芯片市場,谷歌TPU憑借其強大的性能和成本優(yōu)勢,有望打破英偉達GPU一家獨大的局面,促進市場的多元化競爭,推動AI芯片技術(shù)的不斷創(chuàng)新和發(fā)展。
-
英偉達
+關(guān)注
關(guān)注
22文章
3954瀏覽量
93855 -
OpenAI
+關(guān)注
關(guān)注
9文章
1210瀏覽量
8951
發(fā)布評論請先 登錄
OpenAI自研AI芯片即將面世
OpenAI自研AI芯片即將進入試生產(chǎn)階段
英偉達Blackwell芯片機架出現(xiàn)故障 訂單下滑
微軟大手筆采購英偉達AI芯片

英偉達與谷歌聯(lián)手加速量子計算設(shè)備設(shè)計
英偉達與谷歌攜手加速量子計算設(shè)備設(shè)計
英偉達新一代AI芯片過熱問題引關(guān)注
OpenAI攜手博通、臺積電打造內(nèi)部芯片
英偉達市值飆升,逼近蘋果
蘋果、英偉達或攜手參投OpenAI新一輪融資
AI芯片巨頭英偉達漲超4% 英偉達市值暴增7500億
蘋果AI模型訓(xùn)練新動向:攜手谷歌,未選英偉達

評論