
新數據時代開啟 大特點助浪潮分布式存儲走向未來
正文:
2019年,大數據、云計算、人工智能、物聯網、5G……各種新技術名詞不再停留在紙面,正在以前所未有的速度撲面而來。在IDC與浪潮聯合發布的《2019年數據及存儲發展研究報告》中,用了“新數據時代元年”來形容2019年,說明各種新技術交織的威力,也說明數據正在發生前所未有的化學反應。而元年的重要標志之一,是中國數字化轉型IT支出在2019年,將首次超過非數字化轉型IT支出,占比達到51%。
新數據時代,分布式存儲成為趨勢
新時代下數據的形態將會發生諸多改變,而相應的數據存儲,則要需要新的基礎設施來應對挑戰。
數據存儲不止于大,更應實時快速流動和易于管理
在醫院中,患者拿著龐大的片子穿梭在各大科室的情景還歷歷在目,這是數據無法實時流動的典型。新時代的檢測雖然數據量大幅攀升,但在云端存儲的支撐下,即使醫院再繁忙,醫生也可以即時調取查看。如果數據只是簡單存儲,不能實時調取、快速流動和便于管理,就如還需要患者拿著片子跑那樣,無法適應新時代的業務需求。
在各種新技術的交織下,數據會持續大爆炸已是共識,醫院的3D PACS系統(三維醫療影像)會產生海量的小文件并發存儲訪問只是其中一個小例子。新時代下,由AI驅動的應用數量將會激增到百萬級的規模,和其它新技術交織在一起,海量、多元、非結構化將是新時代下數據的新常態。

全球四大類型數據趨勢概覽,2018-2023年
據IDC預測,到2023年,企業產生的數據量將超過消費者所產生的體量,占整個數據圈的59.4%。企業數據的海量產生,說明業務的種類和形態正在發生巨變,如何從容應對海量數據、數據實時性和可靠性、數據整合及管理,從海量數據中挖掘價值,就成為最重要的課題。
海量數據的挑戰十分嚴峻,據IDC數據,2025年全球新創建的數據將達到175ZB,而目前存儲下來的數據只有1%左右。預計2018-2023年,全球存儲裝機容量將以18.4%的年復合增長率增長,其中企業級存儲裝機容量將達到25.1%的年復合增長率。
全球實時數據趨勢預覽,2018-2023年
數據的可靠性和實時性則是IT基礎實施建設的巨大挑戰,物聯網以及人工智能和滲透,如金融的風險評估、交通的自動駕駛等,都需要可靠數據低延遲實時流動。IDC預測,到2023年,實時數據將占全球數據圈24.5%的份額,海量、多元和非結構化成數據常態。
數據整合及管理的挑戰也十分巨大。數據的快速流動需求源自于云、邊、端的實時協同,雖然數據的產生更多來自端側和邊緣,但最重要的數據存儲位置依然在核心,而邊緣產生的數據量具有較高的增速,未來五年復合增長率預計達到33.2%。
為了直面這三大挑戰,企業的IT基礎設施將從云+端的兩級架構向云-邊-端三級架構演進迭代,存儲系統則形成了隨需應變、軟件定義、智能化和多云部署的大趨勢。在新時代的需求下,存儲系統架構上的變革不可避免,而高效、易于擴展的分布式平臺,則有望引領趨勢。
數據存儲新基座 分布式存儲引領未來
報告用閃存是數十年來存儲介質最重大的突破,來類比分布式平臺是系統架構上的重要變革。IDC也預測,到2023年,40%左右的存儲系統都將是分布式存儲架構。
浪潮分布式存儲
為什么傳統集中式存儲無法適應新時代的需求?舉個智慧交通的例子——成都市不到10條道路的范圍內就有超過6,000路視頻流業務,每天90TB的視頻數據和上億的張卡口圖片,8小時內要完成1億張圖片近10億次的操作,并能秒級呈現。這種情況下,傳統存儲的擴展性和數據處理能力遠遠達不到要求,浪潮分布式存儲以小文件聚合、存儲自動分層等功能提供了100多個節點共20PB容量,才實現了每天億級文件數據的并行讀寫、低延時的要求。
從這個案例中,可以看出分布式存儲的特點——可擴展的架構并將數據負載分散在多臺存儲系統,既提高了存儲效率和數據的安全性,又能在性能和容量的橫向擴展上隨需應變,解決大規模、高并發場景下的存儲訪問問題。這種靈活又安全的特性,非常利于面對新時代多變的應用環境。
同時,隨著業務的不斷發展,企業通常都需要面對多云環境,而多云環境下的數據治理一直都是痛點。采用標準化的存儲容器接口,支持云、核心或邊緣部署,是多云環境存儲的趨勢。浪潮分布式存儲可以在一套系統內提供文件、塊、對象、大數據等多種存儲服務,支持多種接口對接,實現了軟件定義存儲、智能化管理和多云間數據快速流動。
傳統存儲系統會存在高額的人工運維成本,如果不有效應對,在業務數據量和復雜度大幅增加后,這個成本將成為企業沉重的負擔。而分布式存儲可以充分利用人工智能技術,實現從被動的故障維護轉變為主動重建和維護,不但可以提升管理效率降低運維成本,甚至可以對性能需求和容量瓶頸進行預測,從容應對未來。
新數據時代四大特征
在以5G、人工智能、物聯網為首的新技術驅動的新時代,萬物智連的數據形態本身就是高度分布式的存在。而隨著技術應用落地的進一步發展,其產生的化學反應會加劇,新數據形態、新應用模式和新價值需求會進化得越來越快,企業也將更依賴數據采集、數據分析來提升生產力、開展業務。所以,更能適應大數據分析、視覺計算、多云等場景的分布式存儲,其取代傳統存儲方式是大勢所趨。
在報告中,IDC對企業應對新數據時代帶來的挑戰提出了三點建議——
1.多元部署:數據的產生和存儲,都向云-邊-端多元部署,企業應及時引入新的存儲解決方案。
2.多云就緒:多云環境是未來的必然趨勢,企業應選擇高效的多云環境
3.關注新技術:傳統的存儲正在達到物理極限,并帶來成本的挑戰,企業應持續關注新技術,比如分布式存儲、閃存技術、人工智能運維等,解決彈性、效率、性能和成本等問題。
這三大建議,都需要分布式存儲才能更好地實現。新時代下存儲解決方案的選擇,其重要性可見一斑,而具備多項優勢的分布式存儲,則是企業邁向新時代的必由之路。
報告原文現在免費下載,PC端下載點擊地址1,移動端點擊地址2,或掃描下方二維碼: