99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

為了供應(yīng),英偉達(dá)將GPU裝換為AI引擎

芯片半導(dǎo)體 ? 來源:半導(dǎo)體行業(yè)觀察 ? 2023-08-10 14:39 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

據(jù)金融時報(bào)報(bào)道,中國的互聯(lián)網(wǎng)巨頭正爭相采購對構(gòu)建生成人工智能系統(tǒng)至關(guān)重要的高性能英偉達(dá)芯片,由于擔(dān)心美國將實(shí)施新的出口管制,中國的互聯(lián)網(wǎng)巨頭們紛紛購買了價(jià)值 50 億美元的訂單。

據(jù)多位知情人士透露,百度、字節(jié)跳動、騰訊和阿里巴巴已下達(dá)價(jià)值 10 億美元的訂單,從這家美國芯片制造商采購約 10 萬顆 A800 處理器,并將于今年交付。兩位接近 Nvidia 的人士表示,中國集團(tuán)還購買了價(jià)值 40 億美元的圖形處理器,將于 2024 年交付。

領(lǐng)先的云 GPU 提供商表示,Nvidia 最好的 AI 芯片在 2024 年之前的產(chǎn)能已經(jīng)售罄。

Nvidia的產(chǎn)品現(xiàn)已成為科技行業(yè)最寶貴的資源。企業(yè)和初創(chuàng)企業(yè)正在瘋狂地將預(yù)算重點(diǎn)轉(zhuǎn)向新的人工智能項(xiàng)目,并迫切需要 GPU。亞馬遜網(wǎng)絡(luò)服務(wù)首席執(zhí)行官 Adam Selipsky在本周接受 The Verge 采訪時表示:“[Nvidia GPU] 供不應(yīng)求”。

“我認(rèn)為,至少在短期內(nèi),英偉達(dá)需求超過供應(yīng),這一點(diǎn)毫無爭議,對每個人來說都是如此?!盇dam Selipsky補(bǔ)充說。

Adam Selipsky進(jìn)一步指出,生成式人工智能并不便宜。目前它的價(jià)格非常昂貴。GPU 的性能非常好,但也相當(dāng)昂貴。例如,訓(xùn)練模型的成本非常昂貴。然后,運(yùn)行推理或運(yùn)行模型并在生產(chǎn)中對這些模型進(jìn)行查詢也非常昂貴。因此為了經(jīng)濟(jì)地完成這些任務(wù),您需要云。絕大多數(shù)公司都需要像 AWS 這樣的公司進(jìn)行創(chuàng)新,隨著時間的推移大幅降低成本,以推動我們不可避免地希望看到生成式 AI 使用量的指數(shù)級增長。

CoreWeave 聯(lián)合創(chuàng)始人兼首席技術(shù)官 Brian Venturo在接受Barron's Tech的采訪時也表示,今年第一季度,確保供應(yīng)鏈中的 [GPU] 分配和產(chǎn)能仍然相當(dāng)容易。從四月初開始,市場變得異常緊張。交貨時間從合理到年底。[這一轉(zhuǎn)變]發(fā)生在一周內(nèi)。不僅僅是云服務(wù)提供商,他們已經(jīng)有了自己的分配。這都是增量需求。它來自大型企業(yè)和人工智能實(shí)驗(yàn)室。

他表示,任何對物流和資源規(guī)劃進(jìn)行合理規(guī)劃的人現(xiàn)在都在關(guān)注 2024 年第一季度至 2024 年第二季度。而CoreWeave也將開始為明年第二季度和第三季度的部署進(jìn)行采購。

在問到為何大家都在搶購英偉達(dá)GPU時,Brian Venturo指出,英偉達(dá)的護(hù)城河是雙重的。

首先是硬件方面。沒有人比英偉達(dá)更擅長制造芯片。其次是軟件。上市時間對于初創(chuàng)企業(yè)來說非常重要。如果您需要重組整個技術(shù)堆棧以使用 AMD 或 TPU [來自 Google 的張量處理單元],那么您可能會失去市場機(jī)會,這是寶貴的時間。

Nvidia 在 CUDA(軟件編程平臺)生態(tài)系統(tǒng)上進(jìn)行了大量投資,他們的先見之明令人難以置信。他們現(xiàn)在基本上領(lǐng)先其他人10年。這不僅僅是 Nvidia 的 10 年,而是他們的客戶和開發(fā)人員在該生態(tài)系統(tǒng)(使用軟件工具和庫)上構(gòu)建的 10 年,利用了其他人之前的工作。我認(rèn)為在短期甚至中期內(nèi)沒有其他人能夠超越 Nvidia。

使用 Google 的 TPU 和 AWS Trainium 加速器的問題被鎖定在具有非常具體的技術(shù)解決方案的供應(yīng)商身上。對于初創(chuàng)企業(yè)來說,這可能不是最好的選擇。您希望供應(yīng)商具有靈活性,因?yàn)槟揽梢栽诙鄠€地方獲得相同的東西。

[Nvidia 的專有網(wǎng)絡(luò)] InfiniBand 還提供了當(dāng)今最好的解決方案來最大限度地減少延遲。其他產(chǎn)品不具備擁塞控制和使工作負(fù)載發(fā)揮最佳性能的功能。

為了供應(yīng),英偉達(dá)將GPU裝換為AI引擎

為了緩解GPU 擠壓的壓力,Nvidia 的 RTX GPU(主要以游戲和圖形聞名)正在為對桌面 AI 感興趣的愛好者進(jìn)行配置和重新包裝。新的 GPU 是 Nvidia 使 GPU 在客戶需要時隨時隨地可用的方法的一部分。

該公司發(fā)布了 RTX GPU,可用于人工智能推理和訓(xùn)練。GPU基于Ada Lovelace架構(gòu),與供不應(yīng)求的紅熱H100 GPU中使用的Hopper架構(gòu)不同。

愛好者已經(jīng)在游戲筆記本電腦上使用 GPU 來運(yùn)行人工智能驅(qū)動的應(yīng)用程序,例如文本到文本或文本到圖像模型。在本周的 SIGGRAPH 會議上,Nvidia 宣布了采用 RTX GPU 的新桌面和工作站設(shè)計(jì)。

包括戴爾、聯(lián)想和 Boxx 在內(nèi)的計(jì)算機(jī)制造商將推出可在機(jī)箱中容納多達(dá)四個 RTX 6000 數(shù)據(jù)生成的工作站。Nvidia 表示,該 GPU 的建議零售價(jià)為 6,000 美元,但戴爾等供應(yīng)商的售價(jià)(含稅)超過 9,000 美元。

每個 RTX 6000 GPU 均基于 Ada Lovelace 設(shè)計(jì),擁有 48GB GDDR6 內(nèi)存和 200Gbps 網(wǎng)絡(luò)接口卡。GPU 的功耗為 300 瓦,基于較舊的 PCIe 4.0 互連標(biāo)準(zhǔn)。

Nvidia還發(fā)布了L40S Ada GPU,它更像是H100的窮人版本,因?yàn)樗贏I訓(xùn)練和推理方面比上一代A100 GPU更快。新產(chǎn)品是一年前發(fā)布的L40服務(wù)器GPU的變體。

L40S 還具有 48GB GDDR6 內(nèi)存,并將應(yīng)用于基于 OVX 參考服務(wù)器設(shè)計(jì)的系統(tǒng)中,用于 Metaverse 應(yīng)用程序。

與基于上一代 Ampere 架構(gòu)的上一代 A40 GPU 相比,L40S 的 AI 和圖形工作負(fù)載速度提高了四倍。AI訓(xùn)練速度比A100 GPU快1.7倍,推理速度快1.5倍。L40S 具有更快的時鐘速度和更高的張量和圖形渲染性能。

Nvidia 的企業(yè) RTX 系統(tǒng)是為 Metaverse 和 AI 市場打造的,新硬件將包括 Omniverse 和 AI Enterprise 軟件的許可證。該公司還發(fā)布了 AI Enterprise 4.0,其中將包括 Nemo 大語言模型。

購買將于今年晚些時候發(fā)貨的 L40S GPU 電源應(yīng)該不會有什么困難。

Nvidia 專業(yè)可視化副總裁 Bob Pette 在新聞發(fā)布會上表示:“這些不會像我們在一些最高端 GPU 中那樣受到限制。”

Nvidia 的低端 RTX 4000 GPU 將于 9 月上市,售價(jià)為 1,250 美元。RTX 4500 將于 10 月開始發(fā)售,售價(jià)為 2,250 美元。

對于 Nvidia 來說,人工智能與游戲一樣重要。該公司希望讓 GPU 成為一種商品,愛好者可以在上面創(chuàng)建自己的程序,然后在最接近的 GPU 可用的地方運(yùn)行。Nvidia 的 H100 GPU 很難找到,但已成為公司的資產(chǎn)。一家名為 CoreWeave 的初創(chuàng)公司已將其 Nvidia GPU 作為抵押品,為其發(fā)展提供資金。加密貨幣礦工也在重新利用數(shù)據(jù)中心的 GPU 來運(yùn)行人工智能。





審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 人工智能
    +關(guān)注

    關(guān)注

    1806

    文章

    49008

    瀏覽量

    249326
  • 英偉達(dá)
    +關(guān)注

    關(guān)注

    22

    文章

    3949

    瀏覽量

    93705
  • PCIe接口
    +關(guān)注

    關(guān)注

    0

    文章

    121

    瀏覽量

    10130
  • GPU芯片
    +關(guān)注

    關(guān)注

    1

    文章

    305

    瀏覽量

    6197
  • GDDR6
    +關(guān)注

    關(guān)注

    0

    文章

    52

    瀏覽量

    11491

原文標(biāo)題:傳中國廠商掃貨英偉達(dá)GPU,豪擲50億買芯片,訂單已經(jīng)排到2024年

文章出處:【微信號:TenOne_TSMC,微信公眾號:芯片半導(dǎo)體】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    英偉達(dá)重磅殺入Arm AI PC,N1X芯片跑分曝光!結(jié)果比較意外

    英偉達(dá)GPU視作圭臬,英偉達(dá)AI“賣鏟人”的標(biāo)簽
    的頭像 發(fā)表于 03-04 00:58 ?2551次閱讀
    <b class='flag-5'>英偉</b><b class='flag-5'>達(dá)</b>重磅殺入Arm <b class='flag-5'>AI</b> PC,N1X芯片跑分曝光!結(jié)果比較意外

    AI大模型不再依賴英偉達(dá)GPU?蘋果揭秘自研大模型

    ? 電子發(fā)燒友網(wǎng)報(bào)道(文/梁浩斌)過去幾年中爆發(fā)的AI算力需求,英偉達(dá)GPU成為了最大的贏家,無論是自動駕駛還是AI大模型,比如特斯拉、小鵬
    的頭像 發(fā)表于 08-05 06:07 ?4639次閱讀
    <b class='flag-5'>AI</b>大模型不再依賴<b class='flag-5'>英偉</b><b class='flag-5'>達(dá)</b><b class='flag-5'>GPU</b>?蘋果揭秘自研大模型

    IBM攜手英偉達(dá)AI數(shù)據(jù)平臺推動企業(yè)級AI創(chuàng)新

    近日,IBM(紐約證券交易所:IBM)宣布與英偉達(dá)(納斯達(dá)克股票代碼:NVDA)開展全新合作,雙方基于英偉達(dá)
    發(fā)表于 03-24 19:20 ?238次閱讀

    美銀分析師:英偉達(dá)加大“物理AI”投入為明智之舉

    新興分支,正逐漸受到業(yè)界的廣泛關(guān)注。英偉達(dá)作為全球領(lǐng)先的圖形處理器(GPU)制造商,其在人工智能領(lǐng)域的實(shí)力不容小覷。此次加大對“物理AI”的投入,不僅體現(xiàn)了
    的頭像 發(fā)表于 01-08 10:51 ?484次閱讀

    英偉達(dá)收購AI初創(chuàng)公司Run:ai

    :ai作為一家專注于AI云計(jì)算軟件平臺開發(fā)的初創(chuàng)公司,其產(chǎn)品以高效利用高性能GPU資源為核心,致力于為用戶提供更快速、更便捷的機(jī)器學(xué)習(xí)加速方案。通過此次收購,英偉
    的頭像 發(fā)表于 12-31 10:46 ?538次閱讀

    英偉達(dá)加速Rubin平臺AI芯片推出,SK海力士提前交付HBM4存儲器

    日,英偉達(dá)(NVIDIA)的主要高帶寬存儲器(HBM)供應(yīng)商南韓SK集團(tuán)會長崔泰源透露,英偉達(dá)執(zhí)行長黃仁勛已要求SK海力士提前六個月交付用于
    的頭像 發(fā)表于 11-05 14:22 ?1149次閱讀

    英偉達(dá)Blackwell GPU未來一年訂單爆滿

    據(jù)摩根士丹利(大摩)透露,人工智能(AI)芯片領(lǐng)域的領(lǐng)軍企業(yè)英偉達(dá)(NVIDIA)的管理層在近期的一系列與投資人的會議中,分享了關(guān)于其下一代繪圖處理器(GPU)Blackwell的強(qiáng)勁
    的頭像 發(fā)表于 10-17 16:52 ?892次閱讀

    英偉達(dá)或明年革新AI GPU設(shè)計(jì),采用插槽設(shè)計(jì)

    10月11日最新消息,集邦咨詢Trendforce于今日(10月11日)發(fā)表博文透露,英偉達(dá)預(yù)計(jì)在今年第四季度推出GB200后,正考慮在其下一代AI GPU產(chǎn)品中采納獨(dú)立
    的頭像 發(fā)表于 10-11 17:05 ?848次閱讀

    Inflection AI轉(zhuǎn)向英特爾Gaudi 3,放棄英偉達(dá)GPU

    近日,人工智能技術(shù)公司Inflection AI宣布了一項(xiàng)重要決策,其最新的企業(yè)平臺放棄采用英偉達(dá)(Nvidia)的GPU,轉(zhuǎn)而選擇英特爾
    的頭像 發(fā)表于 10-10 17:21 ?776次閱讀

    英偉達(dá)AI服務(wù)器革新采用插槽式設(shè)計(jì)

    英偉達(dá)AI服務(wù)器領(lǐng)域即將迎來重大變革。據(jù)里昂證券最新發(fā)布的報(bào)告預(yù)測,從明年下半年起,英偉達(dá)的旗艦級AI
    的頭像 發(fā)表于 09-27 11:47 ?695次閱讀

    挑戰(zhàn)英偉達(dá):聚焦本土GPU領(lǐng)軍企業(yè)崛起

    達(dá)在全球圖形處理單元(GPU)市場的霸主地位,特別是其關(guān)鍵硬件對訓(xùn)練大型AI模型(如ChatGPT背后的OpenAI模型)的不可或缺性,中國正積極尋求突破。盡管英偉
    的頭像 發(fā)表于 09-18 15:24 ?1093次閱讀

    英偉達(dá)投資日本AI公司Sakana AI

    英偉達(dá)現(xiàn)身日本人工智能研發(fā)初創(chuàng)公司Sakana AI的A輪融資名單中;據(jù)悉;Sakana AI的A輪融資而完成超過1億美元,此次融資由New Enterprise Associates
    的頭像 發(fā)表于 09-05 15:46 ?961次閱讀

    英偉達(dá)Blackwell可支持10萬億參數(shù)模型AI訓(xùn)練,實(shí)時大語言模型推理

    電子發(fā)燒友網(wǎng)報(bào)道(文/李彎彎)在近日的Hot Chips 2024大會上,英偉達(dá)公布了下一代GPU架構(gòu)Blackwell的更多細(xì)節(jié)信息,以及未來的產(chǎn)品路線圖
    的頭像 發(fā)表于 09-04 09:10 ?3716次閱讀

    英偉達(dá)TITAN AI顯卡曝光,性能狂超RTX 4090達(dá)63%!# 英偉達(dá)# 顯卡

    顯卡英偉達(dá)
    jf_02331860
    發(fā)布于 :2024年07月24日 17:18:28

    英偉達(dá)全面轉(zhuǎn)向開源GPU內(nèi)核模塊

    英偉達(dá)公司近期宣布了一項(xiàng)重大決策,即全面轉(zhuǎn)向開源GPU內(nèi)核模塊,并計(jì)劃最終以此取代閉源驅(qū)動程序。這一戰(zhàn)略轉(zhuǎn)變標(biāo)志著英偉達(dá)在開源領(lǐng)域邁出了重要
    的頭像 發(fā)表于 07-19 15:26 ?891次閱讀