99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

探討大模型時代背景下數(shù)據(jù)存儲的變革之道

浪潮存儲 ? 來源:浪潮存儲 ? 2024-12-16 14:05 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

在當今數(shù)字化浪潮洶涌澎湃的時代背景下,大模型技術猶如一顆璀璨的明星,照亮了科技發(fā)展的廣闊蒼穹,而存儲技術的變革,作為這一進程中的堅實基石,正日益成為產業(yè)界與學術界共同矚目的核心焦點。

為此,浪潮信息聯(lián)合DOIT推出《有數(shù)·高端對話》欄目,分布式存儲產品線總經理姜樂果及DOIT傳媒主編李祥敬,與特邀嘉賓上海交通大學吳晨濤和中科聞歌陳思含共同圍繞大模型的存儲需求變化,展開了一場深度對話。深入探討大模型時代背景下數(shù)據(jù)存儲的變革之道,共話數(shù)字經濟的創(chuàng)新發(fā)展,進一步夯實數(shù)據(jù)基礎設施,充分釋放數(shù)據(jù)資源的巨大價值,為廣大行業(yè)同仁及用戶提供價值參考與啟示。

大模型驅動存儲變革

大模型技術的迅猛發(fā)展對存儲系統(tǒng)提出了極為嚴苛的要求。以GPT-4為例,其參數(shù)量達到了2200億,每張GPU配備的HBM顯存帶寬達1.6TB/s,整體訓練所需的顯存容量接近400TB。根據(jù)Meta等公司的調研數(shù)據(jù)顯示,大模型在運行過程中會頻繁遭遇內存故障,平均每2-3小時便可能導致一次訓練中斷,這無疑對存儲系統(tǒng)的安全可靠性提出了極高的標準。吳晨濤教授以GPT-4等前沿模型作為實例,清晰闡明了大容量HBM顯存、高帶寬以及高可靠性是存儲系統(tǒng)不可或缺的三大核心特性。

同時,從宏觀角度出發(fā),吳教授呼吁建立開放的數(shù)據(jù)生態(tài)。在這一生態(tài)中,通過強化監(jiān)管與隱私保護,旨在打破數(shù)據(jù)孤島,促進數(shù)據(jù)的流動與共享,為高質量數(shù)據(jù)的充分涌流開辟道路,從而為行業(yè)大模型的發(fā)展提供持續(xù)不斷的動力。

作為存儲廠商的代表,姜樂果從存儲技術進化的視角出發(fā),詳細闡述了在大模型驅動下,傳統(tǒng)計算與當前智算中心存儲設施的全方位變革。在性能層面,智算中心對存儲性能的要求已從百GB級躍遷至TB級,與算力協(xié)同攀升;在容量維度,存儲系統(tǒng)已從PB級大步邁向EB級,輕松應對海量數(shù)據(jù)洪流的沖擊。同時,數(shù)據(jù)格式與協(xié)議的多元化與復雜性日益顯著,這對存儲系統(tǒng)突破兼容壁壘提出了迫切需求。

姜樂果還展示了企業(yè)在數(shù)據(jù)要素市場的積極布局與創(chuàng)新探索。浪潮信息緊跟政策導向,與多方合作伙伴攜手,深入挖掘行業(yè)需求,精心研發(fā)端到端的解決方案及高性能存儲新品。例如,新一代分布式存儲平臺AS13000G7系列產品在MLPerf AI存儲基準評測中表現(xiàn)出色,在3D-UNet(醫(yī)學圖像分割)和CosmoFlow(宇宙學參數(shù)預測)兩個應用場景共計8項測試中,斬獲5項全球第一,彰顯強大的性能實力,為行業(yè)大模型數(shù)據(jù)存儲難題提供有力支撐。

中科聞歌作為一家專注于復雜數(shù)據(jù)解析和AI輔助決策的人工智能公司,陳思含分享了中科聞歌在大模型實踐中的寶貴經驗。在大模型的發(fā)展歷程中,存儲需求經歷了顯著的動態(tài)演變:從早期對訓練速度的追求導致存儲性能需求激增,到參數(shù)量膨脹帶來的數(shù)據(jù)量與參數(shù)規(guī)模指數(shù)級增長,再到多模態(tài)數(shù)據(jù)處理對存儲復雜性的嚴格要求,以及混合讀寫模式和多樣化應用場景引發(fā)的多元化需求。

數(shù)據(jù)質量作為行業(yè)大模型發(fā)展的核心驅動力,中科聞歌在此方面進行了創(chuàng)新實踐。集成了全球多語言媒體數(shù)據(jù)的聞海大數(shù)據(jù)平臺,運用跨模態(tài)AI技術融合信息,構建了垂直領域知識庫,并提供模塊化的智能大屏工具。這一平臺不僅具備全球范圍內高效、安全獲取和處理高質量數(shù)據(jù)的能力,還成為訓練大模型所需高質量數(shù)據(jù)的主要數(shù)據(jù)源和知識庫。

在為客戶提供大模型落地產品和系統(tǒng)時,中科聞歌采取了混合模式,即結合公司自身海量數(shù)據(jù)與用戶的私有行業(yè)數(shù)據(jù)進行模型訓練和應用構建,確保了客戶的數(shù)據(jù)安全,避免了數(shù)據(jù)出域的風險。

協(xié)同創(chuàng)新下的趨勢展望

展望未來存儲發(fā)展,吳晨濤教授立足學術前沿,前瞻性地預判了關鍵技術走向。他認為,跨域資源調度共享技術,特別是基于CXL協(xié)議的內存池創(chuàng)新,將打破資源限制,實現(xiàn)全域資源的靈動調配。同時,優(yōu)化元數(shù)據(jù)管理將提升數(shù)據(jù)檢索與處理效率,而內存故障預測及 Checkpointing 技術則能確保系統(tǒng)穩(wěn)定運行,最大限度地減少故障對數(shù)據(jù)處理連續(xù)性和完整性的影響。這些技術的迭代升級將為存儲技術的發(fā)展指明方向。

作為存儲廠商的代表,浪潮信息積極擁抱變革,從Storage for AI深度適配需求,到AI for Storage智能賦能提效,再到與大模型企業(yè)緊密合作,精準挖掘系統(tǒng)性能潛能,為用戶提供更貼合業(yè)務的產品。

作為大模型企業(yè)的代表,中科聞歌致力于打造高效、安全和可靠的存儲系統(tǒng),以適應大模型時代的新要求。在架構上,采用存算分離架構部署AI-Ready數(shù)據(jù)基礎設施,以加速智能應用。在效率提升方面,全閃存存儲憑借其卓越性能成為破局關鍵,能夠加速數(shù)據(jù)流轉,激活數(shù)據(jù)價值。而在安全防護層面,中科聞歌構建主動防御體系,從內核強化存儲安全,筑牢安全防線。

此次對話欄目的成功舉辦,不僅搭建了產學研用之間的溝通橋梁,還為各方的深度合作提供了寶貴的機會。各方代表能夠相互交流思想、碰撞火花,共同探討大模型時代下的存儲技術變革。這一舉措為產學研用四方攜手共進創(chuàng)造了難得契機,共同迎接大模型時代帶來的存儲變革浪潮,推動我國存儲產業(yè)的繁榮發(fā)展。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 數(shù)據(jù)存儲

    關注

    5

    文章

    999

    瀏覽量

    51738
  • 浪潮
    +關注

    關注

    1

    文章

    475

    瀏覽量

    24694
  • 大模型
    +關注

    關注

    2

    文章

    3142

    瀏覽量

    4067

原文標題:浪潮信息《有數(shù)·高端對話》:大模型時代存儲變革,產學研用共探新局

文章出處:【微信號:inspurstorage,微信公眾號:浪潮存儲】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    數(shù)智化時代,數(shù)據(jù)存儲“進化論”該如何書寫?

    。Gartner預測,到2028年,企業(yè)軟件應用中具備自主性AI的比例將從不到1%升至33%,30%的企業(yè)機構會把數(shù)據(jù)變現(xiàn)或入表納入數(shù)據(jù)戰(zhàn)略。在此背景,作為
    的頭像 發(fā)表于 04-16 11:21 ?199次閱讀
    數(shù)智化<b class='flag-5'>時代</b>,<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>存儲</b>“進化論”該如何書寫?

    工業(yè)存儲變革:MK eMMC?引領數(shù)據(jù)存儲時代

    在當今科技飛速發(fā)展的工業(yè)領域,數(shù)據(jù)存儲猶如工業(yè)設備的 “智慧大腦”,承載著生產流程的關鍵信息。隨著工業(yè) 4.0 的推進,不同市場應用分類對數(shù)據(jù)存儲提出了多樣化且嚴苛的要求。而 eMMC
    的頭像 發(fā)表于 04-02 14:14 ?449次閱讀
    工業(yè)<b class='flag-5'>存儲</b>新<b class='flag-5'>變革</b>:MK eMMC?引領<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>存儲</b>新<b class='flag-5'>時代</b>

    華為加速AI時代數(shù)據(jù)存儲產業(yè)發(fā)展

    近日,在華為中國合作伙伴大會2025上,華為數(shù)據(jù)存儲產品線總裁周躍峰發(fā)表“共筑數(shù)智解決方案,共享數(shù)據(jù)存儲產業(yè)大發(fā)展”主題演講,深入探討如何加
    的頭像 發(fā)表于 04-01 15:35 ?369次閱讀

    麥谷科技即將推出麥聯(lián)智駕AI Agent 1.0

    在當今科技迅猛發(fā)展、日新月異的時代背景,人工智能已經成為推動各行各業(yè)實現(xiàn)深刻變革的核心動力。
    的頭像 發(fā)表于 04-01 14:02 ?518次閱讀

    數(shù)字化時代存儲變革:閃迪引領AI應用的數(shù)據(jù)支持

    在數(shù)字化時代,數(shù)據(jù)已成為推動社會和經濟發(fā)展的核心驅動力。隨著人工智能(AI)、手機、自動駕駛的快速發(fā)展,數(shù)據(jù)存儲技術的重要性愈發(fā)凸顯。隨著現(xiàn)階段AI的爆發(fā)式增長,其發(fā)展狀態(tài)受到全球用戶
    的頭像 發(fā)表于 03-19 08:59 ?321次閱讀
    數(shù)字化<b class='flag-5'>時代</b>的<b class='flag-5'>存儲</b><b class='flag-5'>變革</b>:閃迪引領AI應用的<b class='flag-5'>數(shù)據(jù)</b>支持

    工業(yè)4.0浪潮,數(shù)字孿生如何重塑設備全生命周期管理?

    時代背景,設備管理正經歷變革,目標是建立個性化和數(shù)字化的產品與服務生產模式。數(shù)字孿生技術的出現(xiàn),為實現(xiàn)設備高效管理帶來了革命性變化。傳統(tǒng)設備全生命周期管理的痛點在工業(yè)4.0 之前,嚴重制約著企業(yè)的生產效率與經濟效益。
    的頭像 發(fā)表于 02-17 11:38 ?622次閱讀
    工業(yè)4.0浪潮<b class='flag-5'>下</b>,數(shù)字孿生如何重塑設備全生命周期管理?

    存儲變革進行時:高密度QLC SSD緣何扛起換代大旗(二)

    在語言大模型(LLM)、推理大模型(如DeepSeek)等AI應用爆火的當下,數(shù)據(jù)存儲和訪問速度、模型訓練與推理效率等相關話題也逐步升溫,S
    的頭像 發(fā)表于 02-17 11:35 ?445次閱讀
    <b class='flag-5'>存儲</b><b class='flag-5'>變革</b>進行時:高密度QLC SSD緣何扛起換代大旗(二)

    AI存儲瓶頸破解之道,西部數(shù)據(jù)用前沿技術持續(xù)引領存儲革命

    當前,人工智能已經成為推動企業(yè)創(chuàng)新和可持續(xù)發(fā)展的核心驅動力。隨著生成式AI時代的到來,各種大模型應用層出不窮,人們在關注算力和算法的同時,構建先進的數(shù)據(jù)存儲系統(tǒng),滿足海量
    的頭像 發(fā)表于 11-30 08:27 ?673次閱讀

    浪潮信息如何應對智能時代數(shù)據(jù)存儲需求

    隨著智能時代的全面到來,數(shù)據(jù)量呈現(xiàn)出爆炸性增長,這對存儲系統(tǒng)提出了前所未有的高標準要求。從早期的“百模大戰(zhàn)”演進至“千模大戰(zhàn)”,現(xiàn)已邁入了一個以數(shù)據(jù)為核心的新
    的頭像 發(fā)表于 11-26 13:42 ?654次閱讀

    NVIDIA Omniverse加速零售數(shù)字化轉型

    模型、生成式 AI、數(shù)字孿生技術等前沿科技啟發(fā)了各行各業(yè)的新業(yè)務模態(tài),在這一時代背景 NVIDIA 作為 AI 技術的耕耘者、加速計算方面的領導者,看到了數(shù)字化浪潮中前所未有的變革
    的頭像 發(fā)表于 11-09 13:52 ?932次閱讀

    凱茉銳電子 工業(yè)4.0時代的索尼高清機芯FCB-CV7520:打造智能檢測新標桿

    在工業(yè)4.0時代背景,索尼高清機芯FCB-CV7520憑借其卓越的性能和多功能性,在智能檢測領域樹立了新的標桿。以下是對該機芯的詳細分析:
    的頭像 發(fā)表于 10-31 10:44 ?641次閱讀

    科大訊飛:以AI為驅動引領智能硬件與智慧終端新時代浪潮

    、紫光展銳、Intel、科大訊飛等,共同探討了AI時代背景全球存儲產業(yè)的創(chuàng)新發(fā)展路徑及生態(tài)合作策略。峰會期間,GMIF2024年度大獎揭曉,共有38家產業(yè)鏈上的關鍵企業(yè)榮獲殊榮。
    的頭像 發(fā)表于 10-18 16:13 ?1467次閱讀

    開啟數(shù)字化時代的智能園區(qū):破局之道

    運營水平。古河云科技將探討在數(shù)字轉型時代背景,智慧園區(qū)如何破局,實現(xiàn)可持續(xù)發(fā)展和智能化管理。 1. 數(shù)據(jù)驅動決策: 在數(shù)字轉型的大趨勢
    的頭像 發(fā)表于 10-17 14:08 ?516次閱讀

    科技云報到:大模型時代,向量數(shù)據(jù)庫的野望

    科技云報到:大模型時代,向量數(shù)據(jù)庫的野望
    的頭像 發(fā)表于 10-14 17:18 ?537次閱讀

    模型時代的算力需求

    現(xiàn)在AI已進入大模型時代,各企業(yè)都爭相部署大模型,但如何保證大模型的算力,以及相關的穩(wěn)定性和性能,是一個極為重要的問題,帶著這個極為重要的問題,我需要在此書中找到答案。
    發(fā)表于 08-20 09:04