新數據時代開啟 N大特點助浪潮分佈式存儲走向未來

2019年,大數據、雲計算、人工智能、物聯網、5G……各種新技術名詞不再停留在紙面,正在以前所未有的速度撲面而來。在IDC與浪潮聯合發佈的《2019年數據及存儲發展研究報告》中,用了"新數據時代元年"來形容2019年,說明各種新技術交織的威力,也說明數據正在發生前所未有的化學反應。而元年的重要標誌之一,是中國數字化轉型IT支出在2019年,將首次超過非數字化轉型IT支出,佔比達到51%。

新數據時代開啟 N大特點助浪潮分佈式存儲走向未來

新數據時代,分佈式存儲成為趨勢

新時代下數據的形態將會發生諸多改變,而相應的數據存儲,則要需要新的基礎設施來應對挑戰。

數據存儲不止於大,更應實時快速流動和易於管理

在醫院中,患者拿著龐大的片子穿梭在各大科室的情景還歷歷在目,這是數據無法實時流動的典型。新時代的檢測雖然數據量大幅攀升,但在雲端存儲的支撐下,即使醫院再繁忙,醫生也可以即時調取查看。如果數據只是簡單存儲,不能實時調取、快速流動和便於管理,就如還需要患者拿著片子跑那樣,無法適應新時代的業務需求。

在各種新技術的交織下,數據會持續大爆炸已是共識,醫院的3D PACS系統(三維醫療影像)會產生海量的小文件併發存儲訪問只是其中一個小例子。新時代下,由AI驅動的應用數量將會激增到百萬級的規模,和其它新技術交織在一起,海量、多元、非結構化將是新時代下數據的新常態。

新數據時代開啟 N大特點助浪潮分佈式存儲走向未來

全球四大類型數據趨勢概覽,2018-2023年

據IDC預測,到2023年,企業產生的數據量將超過消費者所產生的體量,佔整個數據圈的59.4%。企業數據的海量產生,說明業務的種類和形態正在發生鉅變,如何從容應對海量數據、數據實時性和可靠性、數據整合及管理,從海量數據中挖掘價值,就成為最重要的課題。

海量數據的挑戰十分嚴峻,據IDC數據,2025年全球新創建的數據將達到175ZB,而目前存儲下來的數據只有1%左右。預計2018-2023年,全球存儲裝機容量將以18.4%的年複合增長率增長,其中企業級存儲裝機容量將達到25.1%的年複合增長率。

新數據時代開啟 N大特點助浪潮分佈式存儲走向未來

全球實時數據趨勢預覽,2018-2023年

數據的可靠性和實時性則是IT基礎實施建設的巨大挑戰,物聯網以及人工智能和滲透,如金融的風險評估、交通的自動駕駛等,都需要可靠數據低延遲實時流動。IDC預測,到2023年,實時數據將佔全球數據圈24.5%的份額,海量、多元和非結構化成數據常態。

數據整合及管理的挑戰也十分巨大。數據的快速流動需求源自於雲、邊、端的實時協同,雖然數據的產生更多來自端側和邊緣,但最重要的數據存儲位置依然在核心,而邊緣產生的數據量具有較高的增速,未來五年複合增長率預計達到33.2%。

為了直面這三大挑戰,企業的IT基礎設施將從雲+端的兩級架構向雲-邊-端三級架構演進迭代,存儲系統則形成了隨需應變、軟件定義、智能化和多雲部署的大趨勢。在新時代的需求下,存儲系統架構上的變革不可避免,而高效、易於擴展的分佈式平臺,則有望引領趨勢。

數據存儲新基座 分佈式存儲引領未來

報告用閃存是數十年來存儲介質最重大的突破,來類比分佈式平臺是系統架構上的重要變革。IDC也預測,到2023年,40%左右的存儲系統都將是分佈式存儲架構。

新數據時代開啟 N大特點助浪潮分佈式存儲走向未來

浪潮分佈式存儲

為什麼傳統集中式存儲無法適應新時代的需求?舉個智慧交通的例子——成都市不到10條道路的範圍內就有超過6,000路視頻流業務,每天90TB的視頻數據和上億的張卡口圖片,8小時內要完成1億張圖片近10億次的操作,並能秒級呈現。這種情況下,傳統存儲的擴展性和數據處理能力遠遠達不到要求,浪潮分佈式存儲以小文件聚合、存儲自動分層等功能提供了100多個節點共20PB容量,才實現了每天億級文件數據的並行讀寫、低延時的要求。

從這個案例中,可以看出分佈式存儲的特點——可擴展的架構並將數據負載分散在多臺存儲系統,既提高了存儲效率和數據的安全性,又能在性能和容量的橫向擴展上隨需應變,解決大規模、高併發場景下的存儲訪問問題。這種靈活又安全的特性,非常利於面對新時代多變的應用環境。

同時,隨著業務的不斷髮展,企業通常都需要面對多雲環境,而多雲環境下的數據治理一直都是痛點。採用標準化的存儲容器接口,支持雲、核心或邊緣部署,是多雲環境存儲的趨勢。浪潮分佈式存儲可以在一套系統內提供文件、塊、對象、大數據等多種存儲服務,支持多種接口對接,實現了軟件定義存儲、智能化管理和多雲間數據快速流動。

傳統存儲系統會存在高額的人工運維成本,如果不有效應對,在業務數據量和複雜度大幅增加後,這個成本將成為企業沉重的負擔。而分佈式存儲可以充分利用人工智能技術,實現從被動的故障維護轉變為主動重建和維護,不但可以提升管理效率降低運維成本,甚至可以對性能需求和容量瓶頸進行預測,從容應對未來。

新數據時代開啟 N大特點助浪潮分佈式存儲走向未來

新數據時代四大特徵

在以5G、人工智能、物聯網為首的新技術驅動的新時代,萬物智連的數據形態本身就是高度分佈式的存在。而隨著技術應用落地的進一步發展,其產生的化學反應會加劇,新數據形態、新應用模式和新價值需求會進化得越來越快,企業也將更依賴數據採集、數據分析來提升生產力、開展業務。所以,更能適應大數據分析、視覺計算、多雲等場景的分佈式存儲,其取代傳統存儲方式是大勢所趨。

在報告中,IDC對企業應對新數據時代帶來的挑戰提出了三點建議——

1. 多元部署:數據的產生和存儲,都向雲-邊-端多元部署,企業應及時引入新的存儲解決方案。

2. 多雲就緒:多雲環境是未來的必然趨勢,企業應選擇高效的多雲環境

3. 關注新技術:傳統的存儲正在達到物理極限,並帶來成本的挑戰,企業應持續關注新技術,比如分佈式存儲、閃存技術、人工智能運維等,解決彈性、效率、性能和成本等問題。

這三大建議,都需要分佈式存儲才能更好地實現。新時代下存儲解決方案的選擇,其重要性可見一斑,而具備多項優勢的分佈式存儲,則是企業邁向新時代的必由之路。


分享到:


相關文章: