99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

簡單認識NVIDIA網絡平臺

NVIDIA英偉達 ? 來源:NVIDIA英偉達 ? 2024-09-09 09:22 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

NVIDIA 帶來知乎精彩問答甄選系列,將為您精選知乎上有關 NVIDIA 產品的精彩問答。

本期將為您帶來更多 NVIDIA 網絡平臺的介紹。

以下兩個知乎甄選問答將為您帶來更多關于 NVIDIA Spectrum-X800 平臺和 NVIDIA Quantum-X800 平臺的信息!

Q:NVIDIA Spectrum-X800 平臺是什么,能否詳細介紹一下?

A:

NVIDIA Spectrum-X800 平臺是業(yè)界第一代 800Gb/s 的以太網網絡平臺,包括了 NVIDIA Spectrum SN5600 800Gb/s 以太網交換機和 NVIDIA BlueField-3 SuperNIC,為多租戶生成式 AI 云和大型企業(yè)級用戶提供了各種至關重要的先進功能。其核心結構是交換機 + SuperNIC(超級網卡)+ LinkX + DOCA 軟件開發(fā)包 + NCCL 集合通信庫。

大模型的發(fā)展推動了 AI 云的爆發(fā)性增長,由于資金、經驗、時間、能耗等因素的影響,很多 AI 用戶選擇通過云的方式解決算力問題。如何快速構建 AI 云,在云上提供高性能的算力資源,保障多用戶上云和運行業(yè)務的安全性,避免多用戶運行多任務時的互相干擾導致業(yè)務性能降低,是當前 AI 云提供商首要考慮的問題。NVIDIA Spectrum-X800 通過優(yōu)化網絡性能,加快 AI 工作負載的處理、分析和執(zhí)行速度,進而縮短 AI 解決方案的開發(fā)、部署和上市時間。Spectrum-X800 專為多租戶環(huán)境打造,實現了每個租戶的 AI 工作負載的性能隔離,使業(yè)務性能能夠持續(xù)保持在最佳狀態(tài),提升客戶滿意度和服務質量。

NVIDIA Spectrum-X800 平臺的出現是生成式 AI 云發(fā)展的必然趨勢,AI 云的出現徹底顛覆了數據中心對于網絡的需求。傳統(tǒng)的數據中心運行的任務多,但是單任務的算力需求不大,任務的耦合性不強,網絡的性能對于業(yè)務的影響不大。但是大模型的出現,替代了大量的傳統(tǒng)任務,All In AI 成為了很多云服務商和數據中心的追求目標,數據中心成為了運行少量的 AI 任務,但是每個 AI 任務的計算量都相當大,且每個計算單元之間的耦合性很強,網絡決定了數據中心的性能。Spectrum-X800 平臺是基于 NCCL 的全面 RoCE 端到端優(yōu)化平臺,涵蓋了對于 AI 訓練至關重要的動態(tài)路由(AR - Adaptive Routing)、可編程擁塞控制等技術和業(yè)務性能隔離技術等,可以充分發(fā)揮網絡的通信效率,擺脫了以太網難擴展的桎梏,保障了云上任務的性能和安全性。

Q:大神們介紹下 NVIDIA Quantum-X800 平臺?

A:

NVIDIA Quantum-X800 平臺是業(yè)界第一代 800Gb/s 的端到端高性能網絡平臺,包括了 NVIDIA Quantum Q3400 交換機和 NVIDIA ConnectX-8 SuperNIC,它的出現,樹立了 AI 專用基礎設施極致性能的新標桿。其核心結構是:交換機 + SuperNIC(超級網卡)+ PCIe 交換機 + LinkX + 網絡計算引擎 + NCCL 集合通信庫。

大模型的發(fā)展推動著算力的不斷提升,同時降低算力功耗的需求也已經變得更為苛刻。如何在提升計算性能同時,又能降低能源的消耗,更高性能的 GPU 和網絡是構建新型 AI 基礎設施的關鍵。NVIDIA Quantum-X800 平臺是專為 NVIDIA Blackwell 架構產品的 Scale Out 而量身打造,為超過萬億參數級的 GPU 計算和 AI 基礎設施進行了全面的優(yōu)化,相比上一代計算平臺實現了性能的大幅提升,同時在同等算力的前提下又實現了功耗的大幅降低。

Quantum-X800 是 Quantum-2 平臺的下一代產品,在 Quantum-2 平臺的基礎之上,進一步提升了端口的速度、交換機端口的密度、網絡計算的能力、以及在軟件上和業(yè)界流行的通信框架上進行了更深層優(yōu)化,單交換機可支持 144 個 800GB/s 端口,實現了 FP8 的網絡計算,SuperNIC 內置 PCIe6.0 交換機,可直連 GPU 和 CPU,擺脫了 GPU 和網絡之間的通信需要依賴于 CPU 或者 PCIe 交換機總線帶寬的限制,大幅提升了 AI、數據處理和高性能計算的性能。

Quantum Q3400 平臺可以支持 14.4TFlops 的網絡計算能力(SHARPv4),是上一代交換機的 9 倍,可以卸載 GPU 和 CPU 的計算類集合通信;Connect-X800 SuperNIC 可以通過內置 PCIe6.0 交換機直接與最新的 Blackwell 架構產品互連,提供 800Gb/s 的單端口網絡通信帶寬,僅用兩層網絡交換就可以支持 10,368 卡的 800Gb/s/GPU 互連或者 13,824 卡的 400Gb/s/GPU 互連,三層網絡可以支持超過 70 萬張卡的 800Gb/s/GPU 互連。

NVIDIA Quantum-X800 平臺實現了單端口性能的加倍,交換容量的 5 倍提升,網絡計算能力的 9 倍提升,為大模型訓練和生成式 AI 提供超強的性能。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯系本站處理。 舉報投訴
  • 以太網
    +關注

    關注

    41

    文章

    5635

    瀏覽量

    175974
  • NVIDIA
    +關注

    關注

    14

    文章

    5309

    瀏覽量

    106421
  • 網絡平臺
    +關注

    關注

    0

    文章

    20

    瀏覽量

    8150

原文標題:NVIDIA 知乎精彩問答甄選 | 探索 NVIDIA 網絡平臺

文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    使用外部文件導入NVIDIA Air構建網絡拓撲的優(yōu)勢

    NVIDIA Air 具有仿真從小型網絡到整個數據中心的任何網絡的獨特能力。在開始配置、路由或管理之前,請先考慮拓撲。
    的頭像 發(fā)表于 07-09 16:32 ?327次閱讀

    NVIDIA技術助力歐洲廠商推出機器人系統(tǒng)與平臺

    基于 NVIDIA 安全的全棧機器人開發(fā)平臺,Agile?Robots、Humanoid、Neura?Robotics、Universal Robots、Vorwerk?和?Wandelbots 等公司推出 NVIDIA 加速的
    的頭像 發(fā)表于 06-16 13:54 ?603次閱讀

    NVIDIA實現神經網絡渲染技術的突破性增強功能

    近日,NVIDIA 宣布了 NVIDIA RTX 神經網絡渲染技術的突破性增強功能。NVIDIA 與微軟合作,將在 4 月的 Microsoft DirectX 預覽版中增加神經
    的頭像 發(fā)表于 04-07 11:33 ?446次閱讀

    NVIDIA推出全新硅光網絡交換機

    NVIDIA 今天推出了 NVIDIA Spectrum-X 和 NVIDIA Quantum-X 硅光網絡交換機,使 AI 工廠能夠跨區(qū)域連接數百萬 GPU ,同時大幅降低能耗和運營
    的頭像 發(fā)表于 03-20 14:52 ?478次閱讀

    NVIDIA網絡安全AI平臺助力保護關鍵基礎設施

    平臺集成了 NVIDIA BlueField 和 Morpheus,并為 Armis、Check Point Software Technologies、CrowdStrike、Deloitte 和 WWT 的下一代網絡防御提
    的頭像 發(fā)表于 02-19 10:22 ?509次閱讀

    使用NVIDIA推理平臺提高AI推理性能

    NVIDIA推理平臺提高了 AI 推理性能,為零售、電信等行業(yè)節(jié)省了數百萬美元。
    的頭像 發(fā)表于 02-08 09:59 ?722次閱讀
    使用<b class='flag-5'>NVIDIA</b>推理<b class='flag-5'>平臺</b>提高AI推理性能

    交通運輸領先企業(yè)率先采用NVIDIA Cosmos平臺

    支撐自動駕駛汽車開發(fā)有三個關鍵計算平臺NVIDIA DGX 平臺用于在數據中心訓練基于 AI 的堆棧;運行在NVIDIA OVX 平臺上的
    的頭像 發(fā)表于 01-09 16:02 ?567次閱讀

    NVIDIA發(fā)布Cosmos?平臺,助力物理AI系統(tǒng)發(fā)展

    NVIDIA近日宣布推出全新的NVIDIA Cosmos?平臺,該平臺專為自動駕駛汽車(AV)和機器人等物理AI系統(tǒng)而設計,旨在推動這些領域的快速發(fā)展。 Cosmos
    的頭像 發(fā)表于 01-08 15:36 ?616次閱讀

    NVIDIA DRIVE Hyperion平臺通過汽車功能安全和網絡安全認證

    NVIDIA 宣布自動駕駛汽車平臺NVIDIA DRIVE AGX Hyperion已通過兩家業(yè)內權威的汽車功能安全和網絡安全認證評估機構——TüV SüD 和 TüV Rheinla
    的頭像 發(fā)表于 01-08 10:43 ?579次閱讀

    NVIDIA Cosmos世界基礎模型平臺發(fā)布

    NVIDIA 宣布推出NVIDIA Cosmos,該平臺由先進的生成式世界基礎模型、高級 tokenizer、護欄和加速視頻處理管線組成,將推動自動駕駛汽車(AV)和機器人等物理 AI 系統(tǒng)的發(fā)展。
    的頭像 發(fā)表于 01-08 10:39 ?569次閱讀

    u-blox深化與NVIDIA Jetson和NVIDIA DRIVE Hyperion平臺合作

    近日,作為提供定位和無線通信技術及服務的全球領先供應商u-blox(SIX:UBXN)宣布,作為在工業(yè)和汽車市場高精度定位領域的戰(zhàn)略增長計劃的關鍵一環(huán),u-blox公司現已加強對NVIDIA Jetson和NVIDIA DRIVE Hyperion
    的頭像 發(fā)表于 12-09 14:08 ?601次閱讀

    簡單認識高通A7 Elite專業(yè)聯網平臺

    當下,AI技術被廣泛應用于各個領域,從智能手機、AI PC到智能家居、智能汽車等等,AI已經融入到我們生活的方方面面。不久前,高通推出首個利用邊緣AI變革網絡連接的商用平臺——高通A7 Elite專業(yè)聯網平臺,通過賦能新型Wi-
    的頭像 發(fā)表于 11-21 10:23 ?763次閱讀

    使用NVIDIA AI平臺確保醫(yī)療數據安全

    三井物產株式會社子公司借助 NVIDIA AI 平臺實現數據集的安全共享并使用在這些數據集上建立的強大模型加速藥物研發(fā)。
    的頭像 發(fā)表于 11-20 09:37 ?668次閱讀

    NVIDIA向開放計算項目捐贈Blackwell平臺設計

    近日,在美國加利福尼亞州舉行的 OCP 全球峰會上,NVIDIA 宣布已把 NVIDIA Blackwell 加速計算平臺的一些基礎元素捐贈給開放計算項目(OCP),并擴大 NVIDIA
    的頭像 發(fā)表于 11-19 15:30 ?664次閱讀

    NVIDIA DOCA-OFED的主要特性

    NVIDIA DOCA 軟件平臺釋放了 NVIDIA BlueField 網絡平臺的潛力,并為NVIDI
    的頭像 發(fā)表于 11-09 13:50 ?1013次閱讀