99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

超級計算機的異構(gòu)分歧

E4Life ? 來源:電子發(fā)燒友網(wǎng) ? 作者:周凱揚 ? 2022-05-10 00:27 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報道(文/周凱揚)轉(zhuǎn)眼接近六月,離新一期TOP500超算排名公布的日子又不遠(yuǎn)了。這半年多時間里,業(yè)界在超算上的動作可不小,新的處理器、新的加速器都在積極加入各大超算中心、國家實驗室的大規(guī)模部署。國內(nèi)的百億億級超算系統(tǒng)目前還沒有提交成績,不過這已經(jīng)不重要了,這場誰先做到百億億級的競賽中國已經(jīng)取勝了,更不用說去年就通過新一代神威超算打破了量子霸權(quán)。

不過近期有一種觀點開始冒頭,那就是超算的規(guī)模已經(jīng)越來越大,結(jié)構(gòu)也越來越復(fù)雜,未來除了CPUGPU之外,FPGA、AI加速器、量子加速器、神經(jīng)形態(tài)芯片和硅光芯片等設(shè)備是否會在超算上占據(jù)更大的份額呢?在這樣的異構(gòu)體系下,超算是否會像其他大型儀器,比如大型粒子對撞機、平方公里陣列射電望遠(yuǎn)鏡一樣,逐一替換部件呢?

開始異構(gòu)化的超算

盡管FPGA已經(jīng)經(jīng)歷了多年的應(yīng)用,但在HPC上亮相的次數(shù)可謂少之又少,這并非是缺乏嘗試,而是傳統(tǒng)FPGA硬件上存在限制,開發(fā)工具也相對特化,對于嘗試數(shù)據(jù)科學(xué)的開發(fā)者來說上手難度較高。

VersalHBM /Xilinx


然而近年來,在各大FPGA廠商的努力下,F(xiàn)PGA已經(jīng)有了長足的發(fā)展,其性能足以支撐起HPC應(yīng)用的運行,F(xiàn)PGA編程也終于有了軟件開發(fā)而不是硬件設(shè)計的樣子。英國的ExCALIBUR項目就開始利用FPGA作為HPC應(yīng)用的測試平臺,所用硬件有Xilinx的Alveo、Versal,也有英特爾的Stratix-10。

神經(jīng)形態(tài)芯片也想要取代GPU的位置,美國桑迪亞國家實驗室就利用了5000萬片英特爾的Loihi神經(jīng)形態(tài)芯片進(jìn)行了研究,證明了這類芯片不僅僅適用于解決AI上的挑戰(zhàn),在分子模擬、生物學(xué)建模這些超算應(yīng)用也能做到極高的能效比。

即便如此,我們在TOP500上看到利用新硬件的情況還是很少,英特爾、AMD英偉達(dá)還是占據(jù)了絕對的主導(dǎo)。

實際應(yīng)用與軟件移植的痛點

但說到頭來,TOP500所奉行的HPL測試標(biāo)準(zhǔn)并不是衡量超算性能的唯一標(biāo)準(zhǔn),還有專注于帶寬的HPCG,以及更看重時延的Graph500。異構(gòu)超算可以借助不同硬件的特性,將這些痛點各個擊破。

富岳超級計算機 / 日本理化學(xué)研究所


日本富岳超算的主要貢獻(xiàn)者之一,前不久剛獲得了日本政府所頒發(fā)紫綬褒章的松岡聰卻對超算上的異構(gòu)趨勢表示了一定的懷疑。他認(rèn)為未來的HPC系統(tǒng)不會由各種類型的設(shè)備組成,反倒是會更加慎重地選擇所用的處理器,從而兼顧計算、帶寬和時延的需求。

原因很簡單,那就是軟件生態(tài)。如今的HPC代碼運行著世界上最復(fù)雜的應(yīng)用,比如氣象預(yù)測、大規(guī)模數(shù)字孿生等等。但這類應(yīng)用由于復(fù)雜程度之高,承擔(dān)不起因為當(dāng)前的硬件架構(gòu)幾年內(nèi)過時而面臨著重新編程或淘汰的代價,這也就是為何CPU+GPU的配置在超算領(lǐng)域依舊是龍頭老大,因為這種架構(gòu)下的超算軟件生態(tài)已經(jīng)成熟,可以沿用下去。

就拿常見的超算編程語言Fortran為例,雖說這一語言在數(shù)學(xué)運算上有著很大的優(yōu)勢,但由于維護(hù)和移植困難,不少開發(fā)者都轉(zhuǎn)向了C/C++,而GPU又多用C++,所以即便現(xiàn)在各種加速器頻出,率先使用他們的也只是數(shù)據(jù)中心或AI等場景,并非超算。

但松岡聰也表示,他并不是指這些設(shè)備無法運行這些代碼,或者移植困難不代表沒有嘗試的價值,而是即便代碼可以運行在這些設(shè)備上,也很難通過負(fù)載均衡來踐行古斯塔夫森定律,即處理器數(shù)量增加可以讓程序運行時間減少,最好的解決思路還是CPU或CPU+GPU這種同構(gòu)的方案。

雖然其他硬件加入的異構(gòu)確實對不同的工作流各個攻破,但超算很多時候是建好就完事的計算系統(tǒng),后續(xù)也許只能增加同樣的計算資源來提高硬件性能,設(shè)計者無法預(yù)先判斷未來要運行的任務(wù),因此追求這樣的靈活性還不如使用同構(gòu)這一通解。

在使用超算的研究者和科學(xué)家看來,他們在一臺超算上力求取得最大性能就已經(jīng)付出了巨大的心力,要是超算內(nèi)真的囊括一堆不同架構(gòu)的設(shè)備,單是龐大的編程和移植工作量就足以讓他們喪失興趣。他們或許更愿意去優(yōu)化算法或理論,都不愿意因為架構(gòu)的變化而去花費大量時間編程。

云化超算成為可行方案?

還有一種觀點也獲得了不少支持,那就是云化超算。云服務(wù)廠商在HPC上的努力也都有目共睹,去年超算大會上,國內(nèi)外大學(xué)之間的比賽也是在云服務(wù)上構(gòu)筑超算系統(tǒng),TOP500上來自云服務(wù)廠商的超算也有幾臺,微軟的Azure就有5臺,最強的一臺Voyager-EUS2甚至排到了第十的高位。

雖然云端部署超算的成本同樣巨大,但對于一些實驗室來說,云端的模塊化特性讓他們不用擔(dān)心自己用不到什么組件,花更少的時間來購置超級計算機,花更多的時間去使用它。比如英國政府就選擇在微軟的Azure上部署慧與的CrayEX超算,用其完成氣象預(yù)測工作。更方便的是,由于超算消耗電力巨大,基礎(chǔ)設(shè)施可以托管在北歐等清潔能源更多的地方。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 處理器
    +關(guān)注

    關(guān)注

    68

    文章

    19898

    瀏覽量

    235404
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    11082

    瀏覽量

    217175
  • 超級計算機
    +關(guān)注

    關(guān)注

    2

    文章

    472

    瀏覽量

    42482
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    NVIDIA驅(qū)動的現(xiàn)代超級計算機如何突破速度極限并推動科學(xué)發(fā)展

    現(xiàn)代高性能計算不僅使得更快的計算成為可能,它正驅(qū)動著 AI 系統(tǒng)解鎖更多領(lǐng)域的科學(xué)突破。 高性能計算經(jīng)歷了多次迭代,每一次都源于對技術(shù)的創(chuàng)造性再利用。例如,早期的超級
    的頭像 發(fā)表于 06-26 19:39 ?509次閱讀
    NVIDIA驅(qū)動的現(xiàn)代<b class='flag-5'>超級</b><b class='flag-5'>計算機</b>如何突破速度極限并推動科學(xué)發(fā)展

    Blue Lion超級計算機將在NVIDIA Vera Rubin上運行

    德國萊布尼茨超算中心(LRZ)將迎來全新超級計算機 Blue Lion,其算力比該中心現(xiàn)有的 SuperMUC-NG 高性能計算機提升了約 30 倍。這臺新的超級
    的頭像 發(fā)表于 06-12 15:39 ?417次閱讀

    NVIDIA技術(shù)賦能歐洲最快超級計算機JUPITER

    NVIDIA 宣布,搭載 NVIDIA Grace Hopper 平臺的 JUPITER 超級計算機成為歐洲最快超級計算機,其運行 HPC 和 AI 工作負(fù)載的速度是第二名的兩倍以上。
    的頭像 發(fā)表于 06-12 15:33 ?512次閱讀

    NVIDIA助力全球最大量子研究超級計算機

    NVIDIA 宣布將開設(shè)量子-AI 技術(shù)商業(yè)應(yīng)用全球研發(fā)中心(G-QuAT),該中心部署了全球最大量子計算研究專用超級計算機 ABCI-Q。
    的頭像 發(fā)表于 05-22 09:44 ?338次閱讀

    NVIDIA 宣布推出 DGX Spark 個人 AI 計算機

    臺式超級計算機由 NVIDIA Grace Blackwell 驅(qū)動,為開發(fā)者、研究人員和數(shù)據(jù)科學(xué)家提供加速 AI 功能;系統(tǒng)由頭部計算機制造商(包括華碩、Dell Technologies、HP
    發(fā)表于 03-19 09:59 ?318次閱讀
       NVIDIA 宣布推出 DGX Spark 個人 AI <b class='flag-5'>計算機</b>

    NVIDIA推出個人AI超級計算機Project DIGITS

    NVIDIA 推出個人 AI 超級計算機 NVIDIA Project DIGITS,全球的 AI 研究員、數(shù)據(jù)科學(xué)家和學(xué)生都可獲取 NVIDIA Grace Blackwell 平臺的強大功能。
    的頭像 發(fā)表于 01-08 11:03 ?833次閱讀

    云端超級計算機使用教程

    云端超級計算機是一種基于云計算的高性能計算服務(wù),它將大量計算資源和存儲資源集中在一起,通過網(wǎng)絡(luò)向用戶提供按需的
    的頭像 發(fā)表于 12-17 10:19 ?556次閱讀

    量子計算機與普通計算機工作原理的區(qū)別

    超越世界上最強大的超級計算機,完成以前不可想象的任務(wù)!這意味著量子計算機可能會徹底改變我們的生活。 在本文中,我們將先了解普通計算機的工作原理,再深入探討量子
    的頭像 發(fā)表于 11-24 11:00 ?1511次閱讀
    量子<b class='flag-5'>計算機</b>與普通<b class='flag-5'>計算機</b>工作原理的區(qū)別

    NVIDIA 以太網(wǎng)加速 xAI 構(gòu)建的全球最大 AI 超級計算機

    市的 Colossus 超級計算機集群達(dá)到了 10 萬顆 NVIDIA? Hopper? GPU 的巨大規(guī)模。該集群使用了 NVIDIA Spectrum-X? 以太網(wǎng)網(wǎng)絡(luò)平臺,該平臺是專為多租戶
    發(fā)表于 10-30 09:33 ?360次閱讀
    NVIDIA 以太網(wǎng)加速 xAI 構(gòu)建的全球最大 AI <b class='flag-5'>超級</b><b class='flag-5'>計算機</b>

    丹麥推出首臺AI超級計算機Gefion

    近日,丹麥正式推出了該國首臺人工智能超級計算機,命名為Gefion,以紀(jì)念丹麥神話中的女神。此次揭幕儀式由英偉達(dá)首席執(zhí)行官黃仁勛與丹麥國王共同出席,彰顯了該項目的重要性和影響力。 Gefion AI
    的頭像 發(fā)表于 10-29 15:13 ?816次閱讀

    NVIDIA助力丹麥發(fā)布首臺AI超級計算機

    這臺丹麥最大的超級計算機由該國政府與丹麥 AI 創(chuàng)新中心共同建設(shè),是一臺 NVIDIA DGX SuperPOD 超級計算機。
    的頭像 發(fā)表于 10-27 09:42 ?911次閱讀

    云端超級計算機怎么用

    云端超級計算機是一種基于云計算的高性能計算服務(wù),它將大量計算資源和存儲資源集中在一起,通過網(wǎng)絡(luò)向用戶提供按需的
    的頭像 發(fā)表于 10-18 10:14 ?486次閱讀

    計算機接口位于什么之間

    計算機接口是計算機硬件和軟件之間、計算機與外部設(shè)備之間以及計算機各部件之間傳輸數(shù)據(jù)、控制信息和狀態(tài)信息的硬件設(shè)備和軟件程序。它在計算機系統(tǒng)中
    的頭像 發(fā)表于 10-14 14:02 ?1326次閱讀

    晶體管計算機和電子管計算機有什么區(qū)別

    晶體管計算機和電子管計算機作為計算機發(fā)展史上的兩個重要階段,它們在多個方面存在顯著的區(qū)別。以下是對這兩類計算機在硬件、性能、應(yīng)用以及技術(shù)發(fā)展等方面區(qū)別的詳細(xì)闡述。
    的頭像 發(fā)表于 08-23 15:28 ?3634次閱讀

    借助NVIDIA超級計算機加速量子計算發(fā)展

    科學(xué)期刊《自然》(Nature)本月早些時候發(fā)表了一項研究,通過使用 NVIDIA 驅(qū)動的超級計算機,驗證了量子計算的商業(yè)化途徑。
    的頭像 發(fā)表于 07-25 09:55 ?922次閱讀