99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

生成式AI帶火的不止GPU,網(wǎng)絡(luò)芯片迎來(lái)下一輪大戰(zhàn)

E4Life ? 來(lái)源:電子發(fā)燒友網(wǎng) ? 作者:周凱揚(yáng) ? 2023-06-30 01:08 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報(bào)道(文/周凱揚(yáng))在生成式AI的熱度之下,橫向擴(kuò)展AI訓(xùn)練與推理性能成了每個(gè)云服務(wù)廠商、數(shù)據(jù)中心以及互聯(lián)網(wǎng)廠商追求的目標(biāo),這點(diǎn)從前段時(shí)間的GPU搶購(gòu)潮就能看出來(lái),龐大的GPU基數(shù)在當(dāng)下幾乎可以和強(qiáng)大的AI算力畫上等號(hào)。

然而,真正將這些GPU連接起來(lái)的,還是靠以太網(wǎng)交換機(jī)、路由這類網(wǎng)絡(luò)芯片。隨著數(shù)據(jù)中心解耦趨勢(shì)愈發(fā)明顯,相繼認(rèn)識(shí)到這一點(diǎn)的網(wǎng)絡(luò)芯片廠商都開始新一輪的軍備競(jìng)賽,諸如博通、美滿和思科等廠商都已經(jīng)加快了新品推出的節(jié)奏。

博通Tomahawk

作為在數(shù)據(jù)中心網(wǎng)絡(luò)芯片耕耘了12年以上的博通,從640G的Trident系列到25.6T的Tomahawk4系列,已經(jīng)完成了多次設(shè)計(jì)迭代,顯著提高了網(wǎng)絡(luò)芯片的帶寬。今年三月,博通終于發(fā)布了Tomahawk 5系列網(wǎng)絡(luò)芯片,也是市面上首個(gè)量產(chǎn)51.2Tbps交換帶寬的芯片。

新的Tomahawk 5系列無(wú)疑是在暴漲的AI需求下誕生的,我們從其設(shè)計(jì)中也能看出。由于做到了更高的端口密度,Tomahawk 5可以實(shí)現(xiàn)256高性能AI/ML加速器之間的單跳連接,且每個(gè)都能做到200Gbps的網(wǎng)絡(luò)帶寬。這對(duì)于數(shù)據(jù)中心的AI訓(xùn)練和推理的負(fù)載來(lái)說(shuō),無(wú)疑提高了吞吐效率,尤其是日益流行且愈發(fā)復(fù)雜的生成式AI模型。

wKgZomSdWGCACur4AAFkjhy-LfI022.jpg
Trident和Tomahawk芯片路線圖 / 博通


在物理設(shè)計(jì)上,Tomahawk 5采用了如今已經(jīng)趨近成熟的共封裝光學(xué)(CPO)方案,相較過(guò)去的光模塊在前端面板插拔的方案,CPO選擇將網(wǎng)絡(luò)交換芯片和光模塊封裝在一起。這一封裝方案結(jié)合5nm的芯片工藝,將功耗進(jìn)一步降低了30%。

另外值得一提的是,博通的第三條網(wǎng)絡(luò)芯片產(chǎn)品線,Jericho,也在近期迎來(lái)了新品Jericho3-AI。相比以高帶寬為重心的Tomahawk產(chǎn)品線,和主打更多功能性的Trident產(chǎn)品線,Jericho往往以較低帶寬、深度緩存和高可編程性著稱。

而Jericho3-AI雖然確實(shí)是28.8T的以太網(wǎng)交換機(jī)芯片,卻針對(duì)AI訓(xùn)練負(fù)載做了特殊的優(yōu)化,更高的端口密度使得Jericho3-AI可以在單個(gè)集群中連接32000個(gè)GPU,并做到800Gbps的連接帶寬表現(xiàn)。博通甚至將其與英偉達(dá)自己的InfiniBand方案對(duì)比,Jericho3-AI在完成時(shí)間上有著10%左右的優(yōu)勢(shì)。這也是Jericho系列獨(dú)有的優(yōu)勢(shì),實(shí)現(xiàn)標(biāo)準(zhǔn)以太網(wǎng)芯片無(wú)法實(shí)現(xiàn)卻在AI或HPC應(yīng)用上被看重的靈活功能。

思科Silicon One

其實(shí)早在2019年思科首次推出Silicon One網(wǎng)絡(luò)芯片時(shí),博通CEO霍克·譚就表示:“思科在該市場(chǎng)的參與,恰巧驗(yàn)證了我們推進(jìn)的這一行業(yè)趨勢(shì),也就是數(shù)據(jù)中心的解耦。我們很高興自己再次押對(duì)了,也歡迎更多的競(jìng)爭(zhēng)?!币?,之前的思科可是博通的優(yōu)質(zhì)客戶之一,如今身份的轉(zhuǎn)變已經(jīng)對(duì)網(wǎng)絡(luò)芯片的市場(chǎng)格局產(chǎn)生了不小的影響。

wKgaomSdWGqAN4RAAAF6las7nPg625.jpg
Silicon One芯片路線圖 / 思科


在第一代自研芯片Silicon One發(fā)布三年半之后,思科在近日終于推出了該產(chǎn)品線的第四代產(chǎn)品,以太網(wǎng)交換機(jī)芯片G200和G202。其中G200專注于統(tǒng)一架構(gòu)和基于以太網(wǎng)的AI/ML應(yīng)用部署,這個(gè)采用 5nm工藝打造的芯片,基于512個(gè)112Gbps SerDes打造,同樣可以做到51.2Tbps的交換帶寬。

而G202則是針對(duì)想要繼續(xù)使用50G SerDes的客戶打造的,同樣基于5nm的工藝,G202采用了512x56Gbps SerDes的配置,其特性與G200完全一致,只不過(guò)交換性能只有G200的一半。

根據(jù)思科的說(shuō)法,由于單設(shè)備512個(gè)100GE以太網(wǎng)端口的超高端口密度,客戶可以在一個(gè)雙層網(wǎng)絡(luò)上構(gòu)建由32000個(gè)400G GPU組成的AI/ML集群。借助G200打造這樣一個(gè)龐大的網(wǎng)絡(luò),卻依然可以省去50%的光學(xué)組件、40%左右的交換機(jī),極大減少這類集群的碳足跡,每年最高可以省下900萬(wàn)kWh的耗能。據(jù)了解,G200已經(jīng)送樣給六大云服務(wù)商中的五家進(jìn)行測(cè)試了。

美滿Teralynx

在收購(gòu)由幾位前博通高管打造的芯片初創(chuàng)公司Innovium后,美滿也開始了他們的網(wǎng)絡(luò)芯片逆襲。同樣是在今年3月,美滿也推出了自己的51.2Tbps交換機(jī)芯片,Teralynx 10。相比其他兩家,美滿為Teralynx 10選擇的定位是超低延遲的可編程交換機(jī)芯片,這也是此前Innovium的設(shè)計(jì)目標(biāo)。

不過(guò)直至目前為止,美滿并沒(méi)有將Teralynx并入自己的Prestera產(chǎn)品線內(nèi),看來(lái)Prestera應(yīng)該還是主打企業(yè)與邊緣數(shù)據(jù)中心市場(chǎng),而面向云端數(shù)據(jù)中心的Teralynx系列繼續(xù)沿用原來(lái)的產(chǎn)品線名稱。

除了用到業(yè)界頂級(jí)的112G SerDes IP和先進(jìn)的工藝實(shí)現(xiàn)低功耗的系統(tǒng)設(shè)計(jì)以外,美滿電子宣稱Teralynx 10可以提供1.7倍的延遲優(yōu)勢(shì),這對(duì)于生成式AI這種看重完成時(shí)間和網(wǎng)絡(luò)傳輸時(shí)間的應(yīng)用來(lái)說(shuō)至關(guān)重要。

wKgaomSdWHOATyvjAACvKFyVHqE636.png
企業(yè)與數(shù)據(jù)中心的交換芯片方案 / 美滿


還有一點(diǎn)與其他兩家不同的是,Teralynx 10可以驅(qū)動(dòng)128個(gè)400Gbps端口、64個(gè)800Gbps端口和32個(gè)1.6Tbps端口,1.6Tbps的端口驅(qū)動(dòng)能力可以說(shuō)是放眼未來(lái)了,這也意味著Teralynx 10可以直接在1RU大小的機(jī)柜中實(shí)現(xiàn)51.2Tbps的性能。

為此,美滿也推出了Nova這一業(yè)界首個(gè)做到1.6Tbps的PAM4電光平臺(tái),Nova基于美滿的200Gbps/lambda光DSP打造,足以為1.6Tbps的可插拔光模塊提供支持。由于DSP的帶寬翻倍,基于Nova的光模塊不僅減少了所需激光和相關(guān)光學(xué)組件的數(shù)量,相較其他的方案來(lái)說(shuō)穩(wěn)定性也同樣加倍。雖然800Gbps的光模塊仍在普及中,但要想在下一代數(shù)據(jù)中心交換網(wǎng)絡(luò)中搶占先機(jī),1.6Tbps的光模塊也該盡快提上日程了。

寫在最后

之所以這些廠商都能這么快推出下一代高性能網(wǎng)絡(luò)芯片,其實(shí)還是靠EDA/IP和封裝技術(shù)打好了第一波基礎(chǔ),廠商們先一步推出了完善的以太網(wǎng)IP和共封裝光學(xué)方案。不過(guò)這也意味著過(guò)去數(shù)據(jù)中心交換硬件很可能迎來(lái)新一波的換代,從目前來(lái)看應(yīng)該是只有大型云服務(wù)廠商有這個(gè)資本進(jìn)行大規(guī)模替換。

但除了這些網(wǎng)絡(luò)芯片公司之間的斗爭(zhēng)之外,他們也需要提防英偉達(dá)這樣既有GPU業(yè)務(wù)又有網(wǎng)絡(luò)芯片業(yè)務(wù)的廠商。以上提到的這三家在推出的新品上都有劍指英偉達(dá)InfiniBand的意思,畢竟后者從一開始就是為了HPC和AI打造的通信標(biāo)準(zhǔn),而它們則是剛從Web Scaling轉(zhuǎn)向AI Scaling,從外部網(wǎng)絡(luò)交換轉(zhuǎn)為內(nèi)部網(wǎng)絡(luò)交換,仍需要不斷提升產(chǎn)品性能才能在這個(gè)競(jìng)爭(zhēng)激烈的市場(chǎng)上存活下去。

不過(guò)這也可以看出AI帶來(lái)的熱度,因?yàn)闊o(wú)論是從軟件還是從硬件上,產(chǎn)品的迭代速度都有了成倍提升。800GbE時(shí)代的到來(lái),也導(dǎo)致所有想在服務(wù)器市場(chǎng)創(chuàng)造增長(zhǎng)的廠商紛紛趨之若鶩,好在這樣的趨勢(shì)恰恰是服務(wù)器市場(chǎng)急需的一劑強(qiáng)心劑。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    4948

    瀏覽量

    131248
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35164

    瀏覽量

    279979
  • 生成式AI
    +關(guān)注

    關(guān)注

    0

    文章

    531

    瀏覽量

    816
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    谷歌新生成AI媒體模型登陸Vertex AI平臺(tái)

    我們?cè)?Vertex AI 上推出新生成 AI 媒體模型: Imagen 4、Veo 3 和 Lyria 2。
    的頭像 發(fā)表于 06-18 09:56 ?375次閱讀

    適用于數(shù)據(jù)中心和AI時(shí)代的800G網(wǎng)絡(luò)

    數(shù)據(jù)中心依賴數(shù)千甚至上萬(wàn)個(gè)GPU集群進(jìn)行高性能計(jì)算,對(duì)帶寬、延遲和數(shù)據(jù)交換效率提出極高要求。 AI云:以生成AI為核心的云平臺(tái),為多
    發(fā)表于 03-25 17:35

    聚云科技榮獲亞馬遜云科技生成AI能力認(rèn)證

    助力企業(yè)加速生成AI應(yīng)用落地 北京2025年2月14日?/美通社/ -- 云管理服務(wù)提供商聚云科技獲得亞馬遜云科技生成
    的頭像 發(fā)表于 02-14 16:07 ?396次閱讀

    聚云科技榮獲亞馬遜云科技生成AI能力認(rèn)證 助力企業(yè)加速生成AI應(yīng)用落地

    北京 ——2025 年 2 月 14 日 云管理服務(wù)提供商聚云科技獲得亞馬遜云科技生成AI能力認(rèn)證,利用亞馬遜云科技全托管的生成
    發(fā)表于 02-14 13:41 ?151次閱讀

    生成AI推理技術(shù)、市場(chǎng)與未來(lái)

    (reasoning)能力,這轉(zhuǎn)變將極大推動(dòng)上層應(yīng)用的發(fā)展。 紅杉資本近期指出,在可預(yù)見的未來(lái),邏輯推理和推理時(shí)計(jì)算將是個(gè)重要主題,并開啟生成
    的頭像 發(fā)表于 01-20 11:16 ?846次閱讀
    <b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>推理技術(shù)、市場(chǎng)與未來(lái)

    生成AI工具好用嗎

    當(dāng)下,生成AI工具正以其強(qiáng)大的內(nèi)容生成能力,為用戶帶來(lái)了前所未有的便捷與創(chuàng)新。那么,生成
    的頭像 發(fā)表于 01-17 09:54 ?460次閱讀

    生成AI”半導(dǎo)體需求飆漲,芯原微AI IP領(lǐng)域有哪些亮眼產(chǎn)品

    全球范圍內(nèi)出貨量超過(guò)1億顆,在10個(gè)應(yīng)用領(lǐng)域超過(guò)70家客戶使用我們的IP,生產(chǎn)出128款AI芯片。芯原圖形處理器(GPU)產(chǎn)品全球累計(jì)出貨量20億顆?!?芯原執(zhí)行副總裁汪洋近日在深圳舉辦的高峰論壇上對(duì)媒體表示。 ? 近年來(lái)
    的頭像 發(fā)表于 11-13 01:26 ?3762次閱讀
    “<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>”半導(dǎo)體需求飆漲,芯原微<b class='flag-5'>AI</b> IP領(lǐng)域有哪些亮眼產(chǎn)品

    GPU服務(wù)器AI網(wǎng)絡(luò)架構(gòu)設(shè)計(jì)

    眾所周知,在大型模型訓(xùn)練中,通常采用每臺(tái)服務(wù)器配備多個(gè)GPU的集群架構(gòu)。在上篇文章《高性能GPU服務(wù)器AI網(wǎng)絡(luò)架構(gòu)(上篇)》中,我們對(duì)
    的頭像 發(fā)表于 11-05 16:20 ?1242次閱讀
    <b class='flag-5'>GPU</b>服務(wù)器<b class='flag-5'>AI</b><b class='flag-5'>網(wǎng)絡(luò)</b>架構(gòu)設(shè)計(jì)

    雷諾下一代車載語(yǔ)音助手Reno將引入生成AI技術(shù)

    11月1日,賽思軟件技術(shù)公司與雷諾公司宣布深化合作,旨在將生成AI技術(shù)和類人交互功能融入雷諾下一代多模態(tài)虛擬車載助手Reno中。
    的頭像 發(fā)表于 11-01 16:39 ?1795次閱讀

    榮耀迎來(lái)一輪投資,中國(guó)電信、中金資本等加入

    據(jù)最新報(bào)道,榮耀在其股權(quán)改革進(jìn)程中迎來(lái)了新一輪投資者的加入,包括中國(guó)電信、中金資本旗下基金、基石資本旗下基金、特發(fā)基金,以及新成立的代理商投資平臺(tái)金石星耀等。   榮耀方面表示,此次融資堅(jiān)持公開透明的原則,旨在進(jìn)步推動(dòng)股
    的頭像 發(fā)表于 10-31 13:44 ?1134次閱讀

    生成AI工具作用

    生成AI工具是指那些能夠自動(dòng)生成文本、圖像、音頻、視頻等多種類型數(shù)據(jù)的人工智能技術(shù)。在此,petacloud.ai小編為您整理
    的頭像 發(fā)表于 10-28 11:19 ?751次閱讀

    印孚瑟斯與微軟擴(kuò)大戰(zhàn)略合作,加速客戶云與AI轉(zhuǎn)型

    印孚瑟斯(Infosys)近日宣布與微軟(Microsoft)進(jìn)步擴(kuò)大戰(zhàn)略合作,旨在加速全球客戶對(duì)生成人工智能(AI)和Microsof
    的頭像 發(fā)表于 10-11 16:20 ?579次閱讀

    OpenAI新一輪融資66億美元,鞏固AI領(lǐng)先地位

    近日,美國(guó)人工智能領(lǐng)域的佼佼者OpenAI宣布,在最新一輪融資中成功籌集了高達(dá)66億美元的資金。此次融資后,OpenAI的估值飆升至1570億美元,再次彰顯了其在全球AI領(lǐng)域的強(qiáng)勁實(shí)力。
    的頭像 發(fā)表于 10-08 14:44 ?604次閱讀

    三行代碼完成生成AI部署

    OpenVINO2024.2版本跟之前版本最大的不同是OpenVINO2024.2分為兩個(gè)安裝包分別是基礎(chǔ)包與生成AI支持包,新發(fā)布的GenAI開發(fā)包支持C++與Python語(yǔ)言接口調(diào)用,支持多種
    的頭像 發(fā)表于 08-30 16:49 ?771次閱讀
    三行代碼完成<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>部署

    OpenAI自研芯片計(jì)劃調(diào)整,傳交臺(tái)積電生產(chǎn)

    近日,全球領(lǐng)先的生成AI應(yīng)用大廠OpenAI在自研芯片領(lǐng)域迎來(lái)了重大戰(zhàn)略調(diào)整。為降低對(duì)外部
    的頭像 發(fā)表于 07-23 16:52 ?966次閱讀