你能想象嗎，未來有望實現(xiàn) “全系存儲”了！什么意思呢，就是利用光來記錄數(shù)據(jù)頁、玻璃作為介質(zhì)實現(xiàn)云上存儲。全息晶體可以填充密集的數(shù)據(jù)，若想刪除數(shù)據(jù)，只需用紫外光就能擦除，也太酷了吧！

這是微軟研究院的一項新研究，文摘菌找到了研究人員的博客，來看看他們是怎么描述的吧~

數(shù)據(jù)存儲一直是計算的一個重要原則，隨著云計算的大量增長，對云數(shù)據(jù)存儲的需求為重新回顧現(xiàn)有技術和開發(fā)新技術開辟了道路。據(jù)預測，到 2024 年，每年將產(chǎn)生約 125ZB 的數(shù)據(jù)，而以經(jīng)濟有效的方式存儲這些數(shù)據(jù)將是一個巨大的挑戰(zhàn)。

云也改變了微軟對計算和存儲的看法。在云計算中，服務被虛擬化。例如，在云數(shù)據(jù)存儲中，客戶購買的是存儲容量和訪問率，而不是物理存儲設備 （參見圖 1）。這種虛擬化為設計和優(yōu)化僅適用于云的技術提供了新的機會。這在存儲領域尤其有趣，因為當前所有的存儲介質(zhì)都是在前云時代創(chuàng)建的。云存儲為具有不同功能的新存儲設備提供了機會，既可以補充微軟目前部署的現(xiàn)有存儲技術，又可以解決云給存儲帶來的一些挑戰(zhàn)。

微軟研究院正在他們的光學云計劃中直面這些挑戰(zhàn)，研究人員正在研究新的方法來改善存儲、計算和網(wǎng)絡，通過匯集不同領域的技術專家來確定光學的新應用。借助微軟在計算機系統(tǒng)和人工智能方面的專業(yè)知識，研究人員看到了將光學物理學家和工程師聚集在一起，產(chǎn)生影響的真正機會。人工智能是這一領域中具有巨大潛力的交叉領域之一，在深度學習等領域它繼續(xù)快速進展。特別在光存儲方面，研究人員對滿足云當前和未來存儲需求的機會尤其感興趣。

圖 1：云存儲的現(xiàn)狀。對客戶來說，存儲成本是訪問速率和所需存儲容量的函數(shù)。在云內(nèi)，使用相關的存儲技術對存儲服務進行虛擬化和構(gòu)建，以向客戶交付所需的性能。虛擬化存儲模型為存儲技術提供了新的機會，這些技術為現(xiàn)有存儲技術提供了新的和補充的特性。

在微軟劍橋研究院，研究人員與微軟 Azure 合作，一直在研究新的云優(yōu)先的光存儲技術。幾年來，在 Silica 項目中，研究人員一直在開發(fā)一種使用玻璃存儲介質(zhì)的光存儲技術。

在這項技術中，他們利用玻璃介質(zhì)的壽命制作寫一次讀多次 （WORM）的歸檔存儲。在最近的一篇熱存儲論文中，研究人員還談到了現(xiàn)有的存儲技術在云時代面臨的挑戰(zhàn)，以及它給新存儲技術帶來的機遇——兩個特別的挑戰(zhàn)是增加存儲密度和訪問率。在這篇博客文章中，研究人員介紹了 HSD（全息存儲設備）項目，這是一個重新設想全息存儲如何在云時代被利用的新項目。

他們發(fā)現(xiàn)，現(xiàn)在重新使用這項技術是特別有利的——在這個時代，云的影響力正在擴大，與光學相關的商品組件已經(jīng)取得了很大的進步，新的機器學習技術可以集成到這個過程中。到目前為止，在他們的工作中，已經(jīng)實現(xiàn)了比現(xiàn)有體積全息存儲技術高 1.8 倍的密度，并且研究人員正在進一步努力提高密度和訪問速率。

“用全新的視角審視全息存儲這一古老的理念，并在云計算領域?qū)ζ溥M行重新設想，在云計算領域，我們可以自由地在整個存儲堆棧上進行創(chuàng)新，并從其他領域引入創(chuàng)意，使之成為一項可行的技術，這非常令人興奮?！薄狟enn Thomsen，高級首席研究員。

全息存儲如何工作？

全息存儲利用光來記錄數(shù)據(jù)頁，每頁以晶體內(nèi)的微小全息圖的形式保存數(shù)百 k 字節(jié)的數(shù)據(jù)。全息圖在晶體中占據(jù)一個小體積，研究人員把它看作一個區(qū)域，在同一個物理體積或區(qū)域中可以記錄多個頁面。通過對記錄的全息圖進行衍射并在相機上捕捉光脈沖，將數(shù)據(jù)頁讀出。這將重新構(gòu)造原始數(shù)據(jù)頁。記錄的全息圖可以用紫外光擦除，然后再使用介質(zhì)來存儲更多的全息圖——使其成為可重寫的存儲介質(zhì)。

相比之下，在 Silica 項目中用作存儲介質(zhì)的玻璃由于其壽命和一次性寫入的特性，適合長期存檔存儲。全息存儲是熱、讀 / 寫云存儲的一個很好的候選，因為它是可重寫的，并且具有快速訪問率的潛力。

全息數(shù)據(jù)存儲的想法可以追溯到 20 世紀 60 年代。到 21 世紀初，學術界和工業(yè)界的幾個研究小組在展示全息存儲介質(zhì)所能達到的令人印象深刻的存儲密度方面取得了重大進展。

為何重新利用全息存儲作為云存儲的一種解決方案？

在當今的存儲解決方案中，訪問速率是一個痛點。Flash 存儲提供了很高的訪問率，但相對昂貴，而且許多云應用程序?qū)?shù)據(jù)保存在硬盤驅(qū)動器 （hdd）上。由于硬盤的機械特性，訪問這些數(shù)據(jù)的速度本來就比較慢。光學固有的并行性——并行讀寫多位的能力——一直是全息存儲最吸引人的特征之一。

這種并行性具有提供高數(shù)據(jù)吞吐量的潛力。此外，查找或?qū)ぶ凡煌捻撁嬷恍枰馐目刂?，而不需要大型機械系統(tǒng)的移動。通過使用電子設備，可以以比現(xiàn)有存儲設備 （如 hdd）更高的訪問速度實現(xiàn)這一點。在這種情況下，全息存儲有可能具有更低的查找延遲，因此，以成本效益的能力提供更高的訪問率。對于許多在訪問存儲時需要高訪問速率和低尾延遲的云應用程序來說，這個特性特別有吸引力。

從頭開始為云設計存儲硬件也讓研究人員擺脫了用戶設備的限制，例如需要適應 2.5 英寸或 3.5 英寸硬盤的形狀因素。云存儲中最小的部署單元是存儲機架，它允許以 “機架規(guī)模”設計新硬件，允許組件在整個機架上高效共享。

通過商用硬件和深度學習將全息存儲帶入當今

“與一個真正的多學科團隊的人一起工作，包括光學物理學家 ， 電子工程師 ， 機器學習專家 ， 以及我的專業(yè)領域 ， 存儲系統(tǒng) ， 這真是鼓舞人心的工作?？纯次覀兪欠衲茏罱K破除來自構(gòu)建云全息存儲的挑戰(zhàn)以及釋放訪問速率的紅利。而這些是這項技術長期的承諾。”——Dushyanth Narayanan，高級首席研究員

研究團隊專注于同時實現(xiàn)密度和快速訪問率。他們已經(jīng)部署了最近開發(fā)的高功率光纖激光系統(tǒng)，將讀寫時間減少一個數(shù)量級，以支持高訪問率。他們還利用最近的高分辨率 LCOS 空間光調(diào)制器和相機的發(fā)展以增加密度，兩者分別來自顯示器產(chǎn)業(yè)和智能手機產(chǎn)業(yè)的發(fā)展的推動，特別是，高分辨率相機技術是關鍵，因為它允許我們將復雜的光學硬件轉(zhuǎn)移到軟件上。

圖 2：過去 20 年，智能手機行業(yè)將普通相機的分辨率提高了 100 倍。在 HSD 項目中，研究人員利用這種分辨率來簡化光學硬件，并將復雜性轉(zhuǎn)化為軟件。

在之前的技術水平，有必要使用復雜的光學來實現(xiàn)從顯示設備到相機的一對一像素匹配，以最大限度地提高密度。如今，研究人員可以利用普通的高分辨率相機 （如圖 2所示）和現(xiàn)代深度學習技術，將復雜性轉(zhuǎn)移到數(shù)字領域。這讓研究人員不用像素匹配就可以使用更簡單、更便宜的光學設備，并用普通的硬件和軟件來補償由此產(chǎn)生的光學畸變。這種方法也降低了制造公差，因為系統(tǒng)可以在運行時在軟件中進行補償和校準。利用這種高分辨率商品組件和深度學習的結(jié)合，已經(jīng)能夠?qū)⒋鎯γ芏忍岣?1.8 倍。

“看到團隊如何在高分辨率圖像上利用機器學習去完成以前需要使用昂貴的光學設備才能完成或者根本無法達成的工作，推進全息存儲性能超越當前技術水平，令人無比興奮?！薄猄ebastian Nowozin，合作研究員

展望：規(guī)?；嫦蛟频墓獯鎯Ψ桨?/p>

盡管已經(jīng)看到在單個區(qū)域中可以獲得令人信服的寫入 / 讀取時間和存儲密度方面的性能，但使全息存儲適用于云的挑戰(zhàn)在于開發(fā)可通過增加區(qū)域數(shù)來擴展存儲容量的方法，同時保持多區(qū)域具有相同的訪問速率。該領域中的先前方法只是機械地移動了介質(zhì)，但這太慢了。

為了解決這個問題，研究人員目前正在演示一種不需要機械移動就能保持訪問速率的多區(qū)域方法。在 HSD 項目中，全息存儲的未來目標是創(chuàng)造一種專為云量身定制的技術，具有快速的訪問速率和大大超過其前輩的存儲密度。想要了解更多關于 HSD 項目和用于云研究的光學，可查看 Azure CTO Mark Russinovich 在微軟 Ignite 2020 上的發(fā)言和項目頁面了解更多細節(jié)。
責任編輯：PSY