AI時代數(shù)據(jù)存儲管理新挑戰(zhàn)分論壇圓滿舉辦
?12月16日，AI時代數(shù)據(jù)存儲管理新挑戰(zhàn)分論壇在無錫成功召開，會上來自螞蟻集團、SphereEx、平凱星辰、九章云極DataCanvas、StreamNative、騰訊云和華為的技術(shù)專家，共同分享了AI時代下數(shù)據(jù)庫技術(shù)最新發(fā)展與實踐。
螞蟻集團開發(fā)工程師、HoraeDB 核心開發(fā)者 曹瑞秋
曹瑞秋在《時序數(shù)據(jù)庫HoraeDB 技術(shù)揭秘》的主題分享中表示，近期已將CeresDB內(nèi)核捐獻(xiàn)到Apache基金會，捐獻(xiàn)的內(nèi)核即為HoraeDB（CeresDB現(xiàn)已更名為HoraeDB）。目前主流的InfluxDB、Prometheus、VictoriaMetrics等時序數(shù)據(jù)庫仍存在時間線高基數(shù)問題和社區(qū)分布式方案不夠完備等問題。而HoraeDB采用倒排索引支持多維查詢，時間線少，適配度高的場景，倒排索引能直接全量存放在內(nèi)存中。HoraeDB的高基數(shù)解決方案的核心是摒棄時間線概念，去除對倒排索引的強依賴，針對不同tag靈活選擇索引。此外，曹瑞秋還詳細(xì)介紹了HoraeDB分布式查詢優(yōu)化、Memtable/SST read等優(yōu)化設(shè)計思路。
?SphereEx創(chuàng)始人 張亮
張亮發(fā)表了《數(shù)據(jù)庫增強計算引擎：數(shù)據(jù)庫架構(gòu)革新新思路》主題演講。他認(rèn)為在海量數(shù)據(jù)急速擴張，OLTP、OLAP、HTAP等多種數(shù)據(jù)應(yīng)用場景，數(shù)據(jù)庫技術(shù)棧碎片化等情勢下，數(shù)據(jù)系統(tǒng)應(yīng)對上應(yīng)用層零入侵，數(shù)據(jù)庫本身工具化，因此中間加速引擎則具有創(chuàng)新性、可插拔、平臺化。SphereEx公司是由Apache頂級開源項目ShardingSphere核心團隊創(chuàng)立，致力于為企業(yè)提供面向新一代數(shù)據(jù)架構(gòu)的數(shù)據(jù)庫增強引擎（DBPlusEngine），提供企業(yè)級、云原生的輕量級分布式數(shù)據(jù)庫解決方案、數(shù)據(jù)安全合規(guī)及信創(chuàng)平滑替換產(chǎn)品和服務(wù)，解決了企業(yè)海量數(shù)據(jù)的存儲與計算、數(shù)據(jù)安全合規(guī)等問題，幫助企業(yè)實現(xiàn)數(shù)據(jù)架構(gòu)的轉(zhuǎn)型升級。
?平凱星辰TiDB Serverless生態(tài)負(fù)責(zé)人 張翔
張翔發(fā)表了《TiDB Serverless：構(gòu)建一個云原生的Serverless數(shù)據(jù)庫》主題演講。他首先介紹了TiDB 是開源、兼容MySQL、具有分布式，可保障業(yè)務(wù)連續(xù)性的真正的內(nèi)核級HTAP分布式混合負(fù)載數(shù)據(jù)處理平臺，在此之后的TiDB Serverless是在去年由PingCAP推出的一款云原生的Serverless數(shù)據(jù)服務(wù)演進(jìn)而來，已經(jīng)由經(jīng)典分布式HTAP改造為下一代Cloud Native架構(gòu)。因此可以實現(xiàn)如支持多租戶的統(tǒng)一接入網(wǎng)關(guān)、TiFlash計算存儲分離、計算資源池化、TiKV Keyspace，以及Scale to Zero、實時喚醒、自動擴縮容等按需分配，可以利用云上的海量資源、高達(dá)11個9的持久性、微服務(wù)化，更高效地使用云上資源，降低爆炸半徑等真正的原生性能，以此實現(xiàn)全量數(shù)據(jù)的彈性，以及簡單易用，降低AI時代的數(shù)據(jù)成本。
?九章云極DataCanvas資深架構(gòu)師 孟圣智
孟圣智發(fā)表了《DingoDB：融合SQL與向量，構(gòu)建功能完整的RAG數(shù)據(jù)庫底座》主題演講，他表示AI時代數(shù)據(jù)需要從更多存儲變?yōu)楦讬z索，九章云極DataCanvas作為AI基礎(chǔ)軟件供應(yīng)商，自主研發(fā)的DingoDB多模向量數(shù)據(jù)庫，實現(xiàn)結(jié)構(gòu)化與非結(jié)構(gòu)化的聯(lián)合存儲、分析和查詢。DingoDB既是關(guān)系數(shù)據(jù)庫，支持SQL、支持事務(wù)，符合用戶使用關(guān)系型數(shù)據(jù)庫的習(xí)慣。同時，DingoDB也是向量數(shù)據(jù)庫，支持Python和Java SDK，可以像使用大多數(shù)純向量數(shù)據(jù)庫一樣，無縫對接LLM App，可以實現(xiàn)企業(yè)知識庫、大模型記憶體、實時決策指標(biāo)計算能力、非結(jié)構(gòu)化數(shù)據(jù)的檢索、Vector Ocean數(shù)據(jù)支撐平臺、結(jié)構(gòu)化與非結(jié)構(gòu)化的融合分析等多種知識檢索應(yīng)用場景。
?StreamNative聯(lián)合創(chuàng)始人、Apache Pulsar PMC Member 翟佳
翟佳發(fā)表了《云原生批流融合數(shù)據(jù)平臺助力AI/LLM的實時數(shù)據(jù)處理》主題演講，他表示Pulsar從捐贈給Apache軟件基金會后的幾年里一直在高速增長。Pulsar采用存算分離云原生架構(gòu)、支持多種語言，批和流統(tǒng)一視圖，可以與Flink、Spark等批流一體計算引擎有效地結(jié)合，方便管理實時和歷史數(shù)據(jù)，確保數(shù)據(jù)新鮮度，將批流一體的數(shù)據(jù)與向量數(shù)據(jù)庫結(jié)合，確保大模型的數(shù)據(jù)顯現(xiàn)度和準(zhǔn)確性，以提高模型準(zhǔn)確性，降低模型幻覺。
?騰訊開源專家 耿航
耿航發(fā)表了《騰訊云TDSQL平滑去O的機遇挑戰(zhàn)與開源實踐》主題演講，他表示核心數(shù)據(jù)庫平滑替換，需要從內(nèi)核、性能、使用習(xí)慣三個層面全面兼容，并且是一個完整的系統(tǒng)工程。騰訊云分布式數(shù)據(jù)庫TDSQL PG開源社區(qū)版OpenTenBase是完整去O和兼容O的數(shù)據(jù)庫內(nèi)核，以內(nèi)核兼容為基礎(chǔ)，打造從驅(qū)動、工具、內(nèi)核三個層面的甲骨文兼容能力，填補基于Postgres的開源分布式HTAP系統(tǒng)的空白。OpenTenBase已吸引超過10個國家和地區(qū)的開發(fā)者關(guān)注，希望通過騰訊及上下游伙伴的技術(shù)投入，打造立足中國，面向全球的開放數(shù)字基礎(chǔ)設(shè)施數(shù)據(jù)底座。
?華為openGauss內(nèi)核技術(shù)專家 胡正超
胡正超發(fā)表了《openGauss內(nèi)核架構(gòu)雙引擎，驅(qū)動大規(guī)模數(shù)據(jù)處理》主題演講，并分享了openGauss 5.1版本持續(xù)在高性能、高可用、高安全、高智能內(nèi)核上增強能力，同時在DataPod和DataKit持續(xù)創(chuàng)新，目標(biāo)是實現(xiàn)更高效的大規(guī)模數(shù)據(jù)處理，更豐富的場景支持，更便捷的使用體驗。其中DataPod在5.1版本實現(xiàn)了一些新功能，提升了系統(tǒng)的易用性、可用性和性能。DataKit為openGauss的數(shù)據(jù)全生命周期生產(chǎn)力工具，當(dāng)前持續(xù)在平臺架構(gòu)和功能插件上構(gòu)建新功能，如增加告警中心、數(shù)據(jù)遷移、開發(fā)、運維等插件。
近幾年數(shù)據(jù)庫百花齊放，快速發(fā)展。生成式AI爆發(fā)之后，AI大模型加速普及應(yīng)用，模型訓(xùn)練推理的準(zhǔn)確性，對系統(tǒng)數(shù)據(jù)與信息的存儲、檢索、計算提出了新挑戰(zhàn)。從本次分論壇嘉賓分享的干貨內(nèi)容，我們可以看到，針對AI的數(shù)據(jù)系統(tǒng)可能正在走向殊途同歸的技術(shù)路徑，那就是分布式原生、實時、向量化（時序也可看作一種向量），另外存算分離、并行架構(gòu)，以滿足AI對數(shù)據(jù)的性能、成本等要求。
點擊“閱讀原文”訪問AtomGit
下載經(jīng)嘉賓授權(quán)的演講材料
原文標(biāo)題：AI時代數(shù)據(jù)存儲管理新挑戰(zhàn)分論壇圓滿舉辦
文章出處：【微信公眾號：開放原子】歡迎添加關(guān)注！文章轉(zhuǎn)載請注明出處。
聲明：本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人，不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用，如有內(nèi)容侵權(quán)或者其他違規(guī)問題，請聯(lián)系本站處理。
舉報投訴
-
OpenHarmony
+關(guān)注
關(guān)注
29文章
3853瀏覽量
18597 -
開放原子基金會
+關(guān)注
關(guān)注
1文章
494瀏覽量
5816
原文標(biāo)題：AI時代數(shù)據(jù)存儲管理新挑戰(zhàn)分論壇圓滿舉辦
文章出處：【微信號：開放原子，微信公眾號：開放原子】歡迎添加關(guān)注！文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
熱點推薦
開源鴻蒙硬件生態(tài)分論壇圓滿舉辦
近日，開源鴻蒙開發(fā)者大會2025（OHDC.2025）硬件生態(tài)分論壇在深圳圓滿舉辦。本次論壇主題為“開源鴻蒙硬件新生態(tài)”，特邀行業(yè)技術(shù)領(lǐng)袖、
開源鴻蒙大屏生態(tài)分論壇圓滿舉辦
近日，開源鴻蒙開發(fā)者大會2025（OHDC.2025）在深圳成功舉辦。在主論壇上隆重舉行了“開源鴻蒙TV SIG”成立儀式，開源鴻蒙TV SIG旨在攜手產(chǎn)業(yè)伙伴，基于開源鴻蒙社區(qū)，構(gòu)建TV關(guān)鍵技術(shù)能力、推動產(chǎn)業(yè)標(biāo)準(zhǔn)制定和落地、加強生態(tài)合作，促進(jìn)大屏生態(tài)繁榮。
開源鴻蒙Watch生態(tài)分論壇圓滿舉辦
近日，開源鴻蒙開發(fā)者大會2025（OHDC.2025）在深圳成功舉辦。大會特別設(shè)立了面向穿戴產(chǎn)業(yè)的Watch生態(tài)分論壇，聚焦智能穿戴產(chǎn)業(yè)前沿趨勢，匯集了來自智能手表全產(chǎn)業(yè)鏈的精英代表，包括手機芯片
開源鴻蒙Web與W3C標(biāo)準(zhǔn)分論壇圓滿舉辦
近日，開源鴻蒙開發(fā)者大會2025（OHDC.2025）Web與W3C標(biāo)準(zhǔn)分論壇在深圳圓滿舉辦。本次分論壇
開源鴻蒙開發(fā)者大會2025·AI分論壇圓滿閉幕，探索開源鴻蒙AI無限可能
5月24日，開源鴻蒙開發(fā)者大會2025·AI分論壇在深圳蛇口希爾頓南海酒店成功舉辦?；顒犹匮麑W(xué)術(shù)領(lǐng)袖、開源專家、行業(yè)先鋒和社區(qū)開發(fā)者，從終端操作系統(tǒng)、國產(chǎn)大模型、智能體、算力芯片、應(yīng)用
“AI+管理 成就不凡：2025企業(yè)財務(wù)數(shù)智化轉(zhuǎn)型論壇”成功舉辦
人間四月季，鷺島正芳菲。4月23日，由廈門國家會計學(xué)院與金蝶聯(lián)合舉辦的“AI+管理 成就不凡——2025企業(yè)財務(wù)數(shù)智化轉(zhuǎn)型論壇”隆重召開。五百余位財務(wù)領(lǐng)域?qū)＜覍W(xué)者，產(chǎn)業(yè)界、企業(yè)界
華為加速AI時代數(shù)據(jù)存儲產(chǎn)業(yè)發(fā)展
近日，在華為中國合作伙伴大會2025上，華為數(shù)據(jù)存儲產(chǎn)品線總裁周躍峰發(fā)表“共筑數(shù)智解決方案，共享數(shù)據(jù)存儲產(chǎn)業(yè)大發(fā)展”主題演講，深入探討如何加速AI
適用于數(shù)據(jù)中心和AI時代的800G網(wǎng)絡(luò)
，成為新一代AI數(shù)據(jù)中心的核心驅(qū)動力。
AI時代的兩大數(shù)據(jù)中心：AI工廠與
發(fā)表于 03-25 17:35
華為全新升級星河AI數(shù)據(jù)中心網(wǎng)絡(luò)
在華為中國合作伙伴大會2025期間，以 “星河AI數(shù)據(jù)中心網(wǎng)絡(luò)，賦AI時代新動能”為主題的數(shù)據(jù)中心網(wǎng)絡(luò)分
浪潮信息剖析智能時代數(shù)據(jù)存儲領(lǐng)域面臨的挑戰(zhàn)與機遇
在當(dāng)今數(shù)字化時代，算力與存力的協(xié)同增長已成為驅(qū)動各行各業(yè)發(fā)展的關(guān)鍵力量。特別是在人工智能（AI）這一前沿領(lǐng)域，隨著數(shù)據(jù)量的爆炸式增長，對存儲系統(tǒng)的需求日益復(fù)雜和多樣。近期，在首屆CCF
OpenHarmony城市技術(shù)論壇第12期——合肥站圓滿舉辦
2024年12月23日，OpenHarmony城市技術(shù)論壇（以下簡稱“技術(shù)論壇”）第12期——合肥站于中國科學(xué)技術(shù)大學(xué)高新校區(qū)圓滿舉辦。本次技術(shù)論壇
中興通訊AI創(chuàng)新生態(tài)論壇成功舉辦
日前，以“全棧智算，打造高效基座；開放合作，構(gòu)建繁榮生態(tài)”為主題的2024世界人工智能大會中興通訊AI創(chuàng)新生態(tài)論壇在滬成功舉辦。論壇匯聚頂尖專家學(xué)者，GPU廠家、模型廠家、運營商及行業(yè)
開啟全新AI時代 智能嵌入式系統(tǒng)快速發(fā)展——“第六屆國產(chǎn)嵌入式操作系統(tǒng)技術(shù)與產(chǎn)業(yè)發(fā)展論壇”圓滿結(jié)束
航空航天大學(xué)杭州創(chuàng)新研究院成功舉辦。本屆論壇有16位知名專家學(xué)者和120余位產(chǎn)學(xué)各界嘉賓參會，論壇圍繞“開啟全新AI時代、智能嵌入式操作系統(tǒng)
發(fā)表于 08-30 17:24
工商網(wǎng)監(jiān)
評論