01
分布式存儲系統(tǒng)與糾刪碼技術背景
分布式存儲是當代大數(shù)據(jù)的基本存在形式,在工業(yè)界和學術界已經(jīng)得到深入研究和高度重視,為了解決大規(guī)模存儲帶來的磁盤故障,跨節(jié)點直接復制數(shù)據(jù)包存儲是最簡單的解決方案。分布式存儲能增強存儲系統(tǒng)可靠性、柔性生存力、抗數(shù)據(jù)損毀風險;是實現(xiàn)網(wǎng)絡熱點訪問負載均衡的技術途徑、提高邊緣計算的處理效率;能達成數(shù)據(jù)共享服務和隱私保護的便利性。
02
存儲系統(tǒng)局部再生修復技術的興起
數(shù)據(jù)編碼分布式存儲有明顯的短板,從而提出分布式存儲的局部可修復問題和熱數(shù)據(jù)節(jié)點負載平衡問題。歸納為發(fā)展局部再生修復編碼技術的源動力包括減少修復成本以提高維護效率,負載均衡與邊緣計算服務。當今分布式存儲的新需求是節(jié)點數(shù)據(jù)間接訪問的局部重構開銷問題和節(jié)點數(shù)據(jù)的局部修復開銷問題。
03
局部可修復碼LRC及其技術發(fā)展態(tài)勢
分布式存儲的局部修復碼LRC是一個欲求解的科學問題,分布式數(shù)據(jù)的局部再生的性能參數(shù)直接的制約博弈關系。分布式存儲的局部修復碼研究現(xiàn)狀:LRC碼性能界的上限和LRC糾刪碼的具體構造辦法,此處列舉了實例和成果。
04
Remarks and Summary
從應用需求看,LRC或RGC糾刪碼尚存在的不足和傾向如下:
LRC和RGC糾刪碼的研究存在瓶頸,未來十年需要大家一起挑戰(zhàn)存儲糾刪碼,提升優(yōu)異技術性能。
隨著計算機技術和存儲技術的發(fā)展,數(shù)據(jù)正以爆炸式的速度增長,海量數(shù)據(jù)對存儲系統(tǒng)提出了巨大的挑戰(zhàn)。糾刪碼技術以犧牲CPU計算量和網(wǎng)絡負載為代價,提高存儲空間利用率,同時提供近似副本的可靠性。 本篇文章聚焦于分布式存儲系統(tǒng)中的糾刪碼技術,將豐富的理論和工程實踐經(jīng)驗加以糅合,探討可局部再生修復糾刪碼技術用于提高分布式存儲可靠性的實質問題,有助于存儲產(chǎn)業(yè)在分布式存儲架構層面上不斷探索和完善。
原文標題:分布式存儲系統(tǒng)中的糾刪碼技術:可局部再生修復技術
文章出處:【微信公眾號:存儲加速器】歡迎添加關注!文章轉載請注明出處。
責任編輯:haq
-
存儲
+關注
關注
13文章
4533瀏覽量
87466 -
LCR
+關注
關注
0文章
151瀏覽量
21356 -
大數(shù)據(jù)
+關注
關注
64文章
8960瀏覽量
140251
原文標題:分布式存儲系統(tǒng)中的糾刪碼技術:可局部再生修復技術
文章出處:【微信號:TopStorage,微信公眾號:存儲加速器】歡迎添加關注!文章轉載請注明出處。
發(fā)布評論請先 登錄
Ceph分布式存儲系統(tǒng)解析
曙光存儲領跑中國分布式存儲市場
兆芯+圖云創(chuàng)智—可信分布式存儲系統(tǒng)解決方案

分布式存儲和集中式存儲有何區(qū)別
分布式存儲有哪幾種類型?
分布式云化數(shù)據(jù)庫有哪些類型
基于ptp的分布式系統(tǒng)設計
淺談屋頂分布式光伏發(fā)電技術的設計與應用

分布式光纖聲波傳感技術的工作原理

評論