99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

蘋(píng)果轉(zhuǎn)向谷歌芯片訓(xùn)練AI,或成棄用英偉達(dá)GPU首例

要長(zhǎng)高 ? 2024-07-30 16:06 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

在7月29日這個(gè)令全球矚目的日子里,蘋(píng)果公司對(duì)外展示了其iPhone AI應(yīng)用的首次預(yù)覽版本,并同步發(fā)表了相關(guān)研究論文,而這篇論文十分明確地指出,蘋(píng)果的深度學(xué)習(xí)人工智能模型正是在Google的TPU(張量處理單元)之上得到鍛煉與提升的。在這篇論文中,我們可以詳細(xì)了解到蘋(píng)果為了支持其Apple Intelligence功能而精心打造的基礎(chǔ)語(yǔ)言模型,其中包括一個(gè)專(zhuān)為在設(shè)備上高效運(yùn)行而設(shè)計(jì)的大約三十億參數(shù)模型以及一個(gè)基于私有云計(jì)算的云端大模型。

蘋(píng)果公司在其官方發(fā)布的論文中對(duì)基礎(chǔ)模型的建模過(guò)程進(jìn)行了全面概述。

值得注意的是,蘋(píng)果在發(fā)布的論文中明確表示,他們?cè)诎饲б话倬攀琓PU v4芯片上成功訓(xùn)練了云端AFM(Apple Foundation Model),并且采用了四千零九十六的序列長(zhǎng)度和四千零九十六個(gè)序列的批量大小,完成了高達(dá)六點(diǎn)三萬(wàn)億token的訓(xùn)練任務(wù)。同時(shí),端側(cè)AFM則在兩千零四十八片TPU v5p芯片上進(jìn)行了深度強(qiáng)化訓(xùn)練。由此可見(jiàn),蘋(píng)果此舉無(wú)疑彰顯了其在人工智能訓(xùn)練領(lǐng)域?qū)Π?a href="http://www.socialnewsupdate.com/tags/英偉達(dá)/" target="_blank">英偉達(dá)圖形處理單元在內(nèi)的其他解決方案的探索意愿。

此外,根據(jù)某些具有影響力的芯片行業(yè)媒體報(bào)道,蘋(píng)果此番舉措其實(shí)已經(jīng)拉開(kāi)了其逐步脫離英偉達(dá)GPU依賴(lài)的序幕。分析師們?cè)诮衲炅鲁鯇?duì)日本證券公司瑞穗證券做出的估算顯示,英偉達(dá)在此前占據(jù)主導(dǎo)的AI芯片市場(chǎng)中,控制著用于訓(xùn)練和部署OpenAI的GPT等模型所需的AI芯片的70%-95%。雖然一些專(zhuān)家將這種市場(chǎng)份額形容為英偉達(dá)的“護(hù)城河”,但歸根結(jié)底,他們還是認(rèn)為這家實(shí)力雄厚的公司,憑借AI圖形處理單元GPU(如標(biāo)志性的H100)與自家獨(dú)特的CUDA軟件相結(jié)合的策略優(yōu)勢(shì),才在這場(chǎng)激烈的競(jìng)爭(zhēng)中搶占先機(jī)。

同樣值得一提的是,包括谷歌、Meta(原Facebook),甲骨文及特斯拉在內(nèi)的多家科技巨頭也一直在傾力研發(fā)和打造自己的人工智能系統(tǒng)和產(chǎn)品。心智觀察所的研究員潘攻愚先生對(duì)此表示,蘋(píng)果宣布其Apple Foundation Model(AFM)在谷歌自主開(kāi)發(fā)的Tensor處理單元(TPU)上進(jìn)行訓(xùn)練,并且還租賃了谷歌的云服務(wù)。他進(jìn)一步指出,蘋(píng)果在AI訓(xùn)練方面的決策反映出了英偉達(dá)通用型AI加速器與谷歌的ASIC定制化AI服務(wù)體系之間的競(jìng)爭(zhēng)愈發(fā)白熱化。

始自2015年,谷歌一直依賴(lài)自主研發(fā)的TPU進(jìn)行AI模型的訓(xùn)練與部署。其特殊之處在于并非以設(shè)計(jì)通用處理器見(jiàn)長(zhǎng),而是致力于打造具備矩陣處理能力的專(zhuān)用處理器,用于優(yōu)化神經(jīng)網(wǎng)絡(luò)相關(guān)的大量運(yùn)算與數(shù)據(jù)傳輸流程,無(wú)需直接訪問(wèn)內(nèi)存,使得整體效率大幅提高。

今年五月份,谷歌發(fā)布公告,宣布推出全新的AI數(shù)據(jù)中心芯片Trillium。對(duì)比此前版型,該芯片性能實(shí)現(xiàn)了驚人的近乎5倍提速。公司透露,此款芯片將主要用于開(kāi)發(fā)自身的AI模型,其中包括備受關(guān)注的Gemini以及Imagen項(xiàng)目。

谷歌方面公開(kāi)表示,若早三年前預(yù)定,最新款TPU每小時(shí)使用費(fèi)用甚至不足2美元。該產(chǎn)品最初于2015年應(yīng)用于公司內(nèi)部工作負(fù)載領(lǐng)域,隨后于2017年公開(kāi)對(duì)外銷(xiāo)售,至今已成為專(zhuān)為AI量身定做且技術(shù)最為成熟的定制芯片之一。

然而,谷歌依然保持著對(duì)英偉達(dá)的高度忠誠(chéng),后者依然成為其最大的合作伙伴。利用英偉達(dá)的GPU和自家的TPU共同訓(xùn)練AI系統(tǒng),同時(shí)在其云服務(wù)平臺(tái)售賣(mài)英偉達(dá)技術(shù)的訪問(wèn)權(quán)限。

如同潘攻愚所分析的那樣,“盡管英偉達(dá)在當(dāng)前高端AI芯片市場(chǎng)擁有高達(dá)80%的份額,而谷歌等大型云服務(wù)商則占據(jù)了其余市場(chǎng)。特別值得一提的是,蘋(píng)果今年采用的谷歌TPUv5雖在通用性上相較英偉達(dá)同類(lèi)產(chǎn)品略顯遜色,卻主打性價(jià)比優(yōu)勢(shì),總體擁有成本低于英偉達(dá)的四倍,且供貨周期更短?,F(xiàn)在,鑒于與谷歌之間微妙的競(jìng)爭(zhēng)與合作關(guān)系,英偉達(dá)暫時(shí)不會(huì)輕易涉足ASIC領(lǐng)域。”

Meta首席執(zhí)行官馬克·扎克伯格及Alphabet首席執(zhí)行官桑達(dá)爾·皮查伊在上周均發(fā)表觀點(diǎn),認(rèn)為他們的企業(yè)以及業(yè)界同行可能在AI基礎(chǔ)設(shè)施建設(shè)上投入過(guò)多,但同時(shí)也承認(rèn),如果不這樣做,那么商業(yè)風(fēng)險(xiǎn)將會(huì)極高。一旦落伍,就意味著將失去未來(lái)10至15年內(nèi)最具價(jià)值的技術(shù)主導(dǎo)權(quán)。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • Google
    +關(guān)注

    關(guān)注

    5

    文章

    1789

    瀏覽量

    59052
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    4948

    瀏覽量

    131258
  • 蘋(píng)果
    +關(guān)注

    關(guān)注

    61

    文章

    24547

    瀏覽量

    204004
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35164

    瀏覽量

    280035
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    AI大模型不再依賴(lài)英偉達(dá)GPU?蘋(píng)果揭秘自研大模型

    ,獲得足夠的算力構(gòu)建自己的計(jì)算中心,用于訓(xùn)練不同應(yīng)用的AI模型。 AI領(lǐng)域眾星捧月也造就了英偉達(dá)市值曾突破三萬(wàn)億美元,并短暫登頂全球第一的位
    的頭像 發(fā)表于 08-05 06:07 ?4650次閱讀
    <b class='flag-5'>AI</b>大模型不再依賴(lài)<b class='flag-5'>英偉</b><b class='flag-5'>達(dá)</b><b class='flag-5'>GPU</b>?<b class='flag-5'>蘋(píng)果</b>揭秘自研大模型

    OpenAI與博通洽談合作!定制化ASIC芯片走向臺(tái)前,英偉達(dá)GPU迎來(lái)“勁敵”?

    設(shè)計(jì)公司就開(kāi)發(fā)新芯片進(jìn)行洽談,以減輕對(duì)英偉達(dá)的依賴(lài)并加強(qiáng)供應(yīng)鏈。 ? 此外,據(jù)稱(chēng)OpenAI還聘請(qǐng)了曾參與谷歌張量處理單元(TPU)開(kāi)發(fā)和生產(chǎn)的谷歌
    的頭像 發(fā)表于 07-20 00:02 ?5755次閱讀
    OpenAI與博通洽談合作!定制化ASIC<b class='flag-5'>芯片</b>走向臺(tái)前,<b class='flag-5'>英偉</b><b class='flag-5'>達(dá)</b><b class='flag-5'>GPU</b>迎來(lái)“勁敵”?

    擺脫依賴(lài)英偉達(dá)!OpenAI首次轉(zhuǎn)向使用谷歌芯片

    地使用非英偉達(dá)芯片,更顯示出其正在逐步擺脫對(duì)英偉達(dá)芯片的深度依賴(lài),在算力布局上邁出了重要戰(zhàn)略調(diào)整
    的頭像 發(fā)表于 07-02 00:59 ?7146次閱讀

    英偉達(dá)臺(tái)積電最大客戶,推動(dòng)AI相關(guān)營(yíng)收增長(zhǎng)

    近日,據(jù)臺(tái)灣媒體報(bào)道,花旗分析師近期對(duì)英偉達(dá)與臺(tái)積電的合作前景持樂(lè)觀態(tài)度,并預(yù)測(cè)英偉達(dá)將助力臺(tái)積電在人工智能(AI)相關(guān)領(lǐng)域的營(yíng)收實(shí)現(xiàn)顯著增
    的頭像 發(fā)表于 01-03 14:22 ?664次閱讀

    蘋(píng)果自研AI芯片,終結(jié)與英偉達(dá)多年合作

    蘋(píng)果公司正加速推進(jìn)自研AI芯片的步伐,旨在減少對(duì)外部供應(yīng)商的依賴(lài),這一戰(zhàn)略調(diào)整將徹底改變其與英偉達(dá)
    的頭像 發(fā)表于 12-27 10:18 ?585次閱讀

    蘋(píng)果加速AI芯片研發(fā),終結(jié)與英偉達(dá)合作關(guān)系

    近日,蘋(píng)果公司正全力以赴地推進(jìn)自研AI芯片的研發(fā)進(jìn)程,旨在減少對(duì)于第三方芯片開(kāi)發(fā)商的依賴(lài)。這一舉措可能預(yù)示著,蘋(píng)果
    的頭像 發(fā)表于 12-26 11:07 ?712次閱讀

    亞馬遜轉(zhuǎn)向Trainium芯片,全力投入AI模型訓(xùn)練

    近日,亞馬遜宣布了一項(xiàng)重大決策,決定停止Inferentia AI芯片的開(kāi)發(fā),轉(zhuǎn)而將全部精力投入到Trainium芯片的研發(fā)上,以此作為與英偉達(dá)
    的頭像 發(fā)表于 12-13 14:14 ?642次閱讀

    英偉達(dá)明年將革新AI GPU設(shè)計(jì),采用插槽設(shè)計(jì)

    10月11日最新消息,集邦咨詢Trendforce于今日(10月11日)發(fā)表博文透露,英偉達(dá)預(yù)計(jì)在今年第四季度推出GB200后,正考慮在其下一代AI GPU產(chǎn)品中采納獨(dú)立
    的頭像 發(fā)表于 10-11 17:05 ?852次閱讀

    Inflection AI轉(zhuǎn)向英特爾Gaudi 3,放棄英偉達(dá)GPU

    近日,人工智能技術(shù)公司Inflection AI宣布了一項(xiàng)重要決策,其最新的企業(yè)平臺(tái)將放棄采用英偉達(dá)(Nvidia)的GPU,轉(zhuǎn)而選擇英特爾的Gaudi 3加速器。
    的頭像 發(fā)表于 10-10 17:21 ?777次閱讀

    挑戰(zhàn)英偉達(dá):聚焦本土GPU領(lǐng)軍企業(yè)崛起

    達(dá)在全球圖形處理單元(GPU)市場(chǎng)的霸主地位,特別是其關(guān)鍵硬件對(duì)訓(xùn)練大型AI模型(如ChatGPT背后的OpenAI模型)的不可或缺性,中國(guó)正積極尋求突破。盡管
    的頭像 發(fā)表于 09-18 15:24 ?1112次閱讀

    英偉達(dá)Blackwell可支持10萬(wàn)億參數(shù)模型AI訓(xùn)練,實(shí)時(shí)大語(yǔ)言模型推理

    。 ????????????????????? 英偉達(dá)Blackwell是通用計(jì)算全棧矩陣的終極解決方案,由多個(gè)英偉達(dá)芯片組成,包括Blac
    的頭像 發(fā)表于 09-04 09:10 ?3729次閱讀

    蘋(píng)果AI模型訓(xùn)練新動(dòng)向:攜手谷歌,未選英偉達(dá)

    近日,蘋(píng)果公司發(fā)布的最新研究報(bào)告揭示了其在人工智能領(lǐng)域的又一重要戰(zhàn)略選擇——采用谷歌設(shè)計(jì)的芯片來(lái)訓(xùn)練AI模型,而非行業(yè)巨頭
    的頭像 發(fā)表于 08-01 18:11 ?1145次閱讀

    從TPU v1到Trillium TPU,蘋(píng)果等科技公司使用谷歌TPU進(jìn)行AI計(jì)算

    ,在訓(xùn)練尖端人工智能方面,大型科技公司正在尋找英偉達(dá)以外的替代品。 ? 不斷迭代的谷歌TPU 芯片 ? 隨著機(jī)器學(xué)習(xí)算法,特別是深度學(xué)習(xí)算法
    的頭像 發(fā)表于 07-31 01:08 ?3957次閱讀

    蘋(píng)果承認(rèn)使用谷歌芯片來(lái)訓(xùn)練AI

    蘋(píng)果公司最近在一篇技術(shù)論文中披露,其先進(jìn)的人工智能系統(tǒng)Apple Intelligence背后的兩個(gè)關(guān)鍵AI模型,是在谷歌設(shè)計(jì)的云端芯片上完成預(yù)訓(xùn)練
    的頭像 發(fā)表于 07-30 17:03 ?921次閱讀

    蘋(píng)果揭示AI新動(dòng)向:Apple Intelligence模型在谷歌云端芯片上預(yù)訓(xùn)練

    蘋(píng)果公司在最新的技術(shù)論文中披露了一項(xiàng)重要信息,其全新的人工智能系統(tǒng)Apple Intelligence所依賴(lài)的模型并非傳統(tǒng)上大型科技公司首選的NVIDIA GPU,而是選擇了在谷歌設(shè)計(jì)的云端
    的頭像 發(fā)表于 07-30 15:00 ?851次閱讀