新技術(shù)的交織驅(qū)動下,新數(shù)據(jù)元年已經(jīng)到來,新時代下的數(shù)據(jù)存儲和使用有什么特點?分布式存儲為何能助力企業(yè)從容應(yīng)對新數(shù)據(jù)挑戰(zhàn),引領(lǐng)未來?
2019年,大數(shù)據(jù)、云計算、人工智能、物聯(lián)網(wǎng)、5G……各種新技術(shù)名詞不再停留在紙面,正在以前所未有的速度撲面而來。在IDC與浪潮聯(lián)合發(fā)布的《2019年數(shù)據(jù)及存儲發(fā)展研究報告》中,用了“新數(shù)據(jù)時代元年”來形容2019年,說明各種新技術(shù)交織的威力,也說明數(shù)據(jù)正在發(fā)生前所未有的化學(xué)反應(yīng)。而元年的重要標(biāo)志之一,是中國數(shù)字化轉(zhuǎn)型IT支出在2019年,將首次超過非數(shù)字化轉(zhuǎn)型IT支出,占比達到51%。
新數(shù)據(jù)時代,分布式存儲成為趨勢
新時代下數(shù)據(jù)的形態(tài)將會發(fā)生諸多改變,而相應(yīng)的數(shù)據(jù)存儲,則要需要新的基礎(chǔ)設(shè)施來應(yīng)對挑戰(zhàn)。
數(shù)據(jù)存儲不止于大,更應(yīng)實時快速流動和易于管理
在醫(yī)院中,患者拿著龐大的片子穿梭在各大科室的情景還歷歷在目,這是數(shù)據(jù)無法實時流動的典型。新時代的檢測雖然數(shù)據(jù)量大幅攀升,但在云端存儲的支撐下,即使醫(yī)院再繁忙,醫(yī)生也可以即時調(diào)取查看。如果數(shù)據(jù)只是簡單存儲,不能實時調(diào)取、快速流動和便于管理,就如還需要患者拿著片子跑那樣,無法適應(yīng)新時代的業(yè)務(wù)需求。
在各種新技術(shù)的交織下,數(shù)據(jù)會持續(xù)大爆炸已是共識,醫(yī)院的3D PACS系統(tǒng)(三維醫(yī)療影像)會產(chǎn)生海量的小文件并發(fā)存儲訪問只是其中一個小例子。新時代下,由AI驅(qū)動的應(yīng)用數(shù)量將會激增到百萬級的規(guī)模,和其它新技術(shù)交織在一起,海量、多元、非結(jié)構(gòu)化將是新時代下數(shù)據(jù)的新常態(tài)。
全球四大類型數(shù)據(jù)趨勢概覽,2018-2023年
據(jù)IDC預(yù)測,到2023年,企業(yè)產(chǎn)生的數(shù)據(jù)量將超過消費者所產(chǎn)生的體量,占整個數(shù)據(jù)圈的59.4%。企業(yè)數(shù)據(jù)的海量產(chǎn)生,說明業(yè)務(wù)的種類和形態(tài)正在發(fā)生巨變,如何從容應(yīng)對海量數(shù)據(jù)、數(shù)據(jù)實時性和可靠性、數(shù)據(jù)整合及管理,從海量數(shù)據(jù)中挖掘價值,就成為最重要的課題。
海量數(shù)據(jù)的挑戰(zhàn)十分嚴峻,據(jù)IDC數(shù)據(jù),2025年全球新創(chuàng)建的數(shù)據(jù)將達到175ZB,而目前存儲下來的數(shù)據(jù)只有1%左右。預(yù)計2018-2023年,全球存儲裝機容量將以18.4%的年復(fù)合增長率增長,其中企業(yè)級存儲裝機容量將達到25.1%的年復(fù)合增長率。
全球?qū)崟r數(shù)據(jù)趨勢預(yù)覽,2018-2023年
數(shù)據(jù)的可靠性和實時性則是IT基礎(chǔ)實施建設(shè)的巨大挑戰(zhàn),物聯(lián)網(wǎng)以及人工智能和滲透,如金融的風(fēng)險評估、交通的自動駕駛等,都需要可靠數(shù)據(jù)低延遲實時流動。IDC預(yù)測,到2023年,實時數(shù)據(jù)將占全球數(shù)據(jù)圈24.5%的份額,海量、多元和非結(jié)構(gòu)化成數(shù)據(jù)常態(tài)。
數(shù)據(jù)整合及管理的挑戰(zhàn)也十分巨大。數(shù)據(jù)的快速流動需求源自于云、邊、端的實時協(xié)同,雖然數(shù)據(jù)的產(chǎn)生更多來自端側(cè)和邊緣,但最重要的數(shù)據(jù)存儲位置依然在核心,而邊緣產(chǎn)生的數(shù)據(jù)量具有較高的增速,未來五年復(fù)合增長率預(yù)計達到33.2%。
為了直面這三大挑戰(zhàn),企業(yè)的IT基礎(chǔ)設(shè)施將從云+端的兩級架構(gòu)向云-邊-端三級架構(gòu)演進迭代,存儲系統(tǒng)則形成了隨需應(yīng)變、軟件定義、智能化和多云部署的大趨勢。在新時代的需求下,存儲系統(tǒng)架構(gòu)上的變革不可避免,而高效、易于擴展的分布式平臺,則有望引領(lǐng)趨勢。
數(shù)據(jù)存儲新基座 分布式存儲引領(lǐng)未來
報告用閃存是數(shù)十年來存儲介質(zhì)最重大的突破,來類比分布式平臺是系統(tǒng)架構(gòu)上的重要變革。IDC也預(yù)測,到2023年,40%左右的存儲系統(tǒng)都將是分布式存儲架構(gòu)。
浪潮分布式存儲
為什么傳統(tǒng)集中式存儲無法適應(yīng)新時代的需求?舉個智慧交通的例子——成都市不到10條道路的范圍內(nèi)就有超過6,000路視頻流業(yè)務(wù),每天90TB的視頻數(shù)據(jù)和上億的張卡口圖片,8小時內(nèi)要完成1億張圖片近10億次的操作,并能秒級呈現(xiàn)。這種情況下,傳統(tǒng)存儲的擴展性和數(shù)據(jù)處理能力遠遠達不到要求,浪潮分布式存儲以小文件聚合、存儲自動分層等功能提供了100多個節(jié)點共20PB容量,才實現(xiàn)了每天億級文件數(shù)據(jù)的并行讀寫、低延時的要求。
從這個案例中,可以看出分布式存儲的特點——可擴展的架構(gòu)并將數(shù)據(jù)負載分散在多臺存儲系統(tǒng),既提高了存儲效率和數(shù)據(jù)的安全性,又能在性能和容量的橫向擴展上隨需應(yīng)變,解決大規(guī)模、高并發(fā)場景下的存儲訪問問題。這種靈活又安全的特性,非常利于面對新時代多變的應(yīng)用環(huán)境。
同時,隨著業(yè)務(wù)的不斷發(fā)展,企業(yè)通常都需要面對多云環(huán)境,而多云環(huán)境下的數(shù)據(jù)治理一直都是痛點。采用標(biāo)準(zhǔn)化的存儲容器接口,支持云、核心或邊緣部署,是多云環(huán)境存儲的趨勢。浪潮分布式存儲可以在一套系統(tǒng)內(nèi)提供文件、塊、對象、大數(shù)據(jù)等多種存儲服務(wù),支持多種接口對接,實現(xiàn)了軟件定義存儲、智能化管理和多云間數(shù)據(jù)快速流動。
傳統(tǒng)存儲系統(tǒng)會存在高額的人工運維成本,如果不有效應(yīng)對,在業(yè)務(wù)數(shù)據(jù)量和復(fù)雜度大幅增加后,這個成本將成為企業(yè)沉重的負擔(dān)。而分布式存儲可以充分利用人工智能技術(shù),實現(xiàn)從被動的故障維護轉(zhuǎn)變?yōu)橹鲃又亟ê途S護,不但可以提升管理效率降低運維成本,甚至可以對性能需求和容量瓶頸進行預(yù)測,從容應(yīng)對未來。
新數(shù)據(jù)時代四大特征
在以5G、人工智能、物聯(lián)網(wǎng)為首的新技術(shù)驅(qū)動的新時代,萬物智連的數(shù)據(jù)形態(tài)本身就是高度分布式的存在。而隨著技術(shù)應(yīng)用落地的進一步發(fā)展,其產(chǎn)生的化學(xué)反應(yīng)會加劇,新數(shù)據(jù)形態(tài)、新應(yīng)用模式和新價值需求會進化得越來越快,企業(yè)也將更依賴數(shù)據(jù)采集、數(shù)據(jù)分析來提升生產(chǎn)力、開展業(yè)務(wù)。所以,更能適應(yīng)大數(shù)據(jù)分析、視覺計算、多云等場景的分布式存儲,其取代傳統(tǒng)存儲方式是大勢所趨。
在報告中,IDC對企業(yè)應(yīng)對新數(shù)據(jù)時代帶來的挑戰(zhàn)提出了三點建議——
多元部署:數(shù)據(jù)的產(chǎn)生和存儲,都向云-邊-端多元部署,企業(yè)應(yīng)及時引入新的存儲解決方案。多云就緒:多云環(huán)境是未來的必然趨勢,企業(yè)應(yīng)選擇高效的多云環(huán)境關(guān)注新技術(shù):傳統(tǒng)的存儲正在達到物理極限,并帶來成本的挑戰(zhàn),企業(yè)應(yīng)持續(xù)關(guān)注新技術(shù),比如分布式存儲、閃存技術(shù)、人工智能運維等,解決彈性、效率、性能和成本等問題。
這三大建議,都需要分布式存儲才能更好地實現(xiàn)。新時代下存儲解決方案的選擇,其重要性可見一斑,而具備多項優(yōu)勢的分布式存儲,則是企業(yè)邁向新時代的必由之路。
- 蜜度索驥:以跨模態(tài)檢索技術(shù)助力“企宣”向上生長
- 春運搶票有妙招,小米SU7限量版洋紅版閃亮登場,你準(zhǔn)備好了嗎?
- 阿里云通義千問視覺理解模型再降80%,視覺AI進入新紀元
- 騰訊音樂集團侵權(quán)風(fēng)波再起:中國音樂著作權(quán)協(xié)會再勝訴
- 蘋果新Magic Mouse 3重新設(shè)計充電口,不再“神秘”,究竟能否打破常規(guī)引人關(guān)注
- 日本車企11月產(chǎn)量受新能源沖擊,行業(yè)整合能否破局?
- XR設(shè)備市場風(fēng)向轉(zhuǎn)變:AR崛起,VR熱度不減
- 全球用戶聯(lián)手抵制微軟:自由軟件基金會呼吁持續(xù)施壓
- 王騰雙喜臨門:小米中國區(qū)重磅晉升,REDMI品牌再添新翼
- 蘋果折疊iPhone爆料:未來已來,2026年亮相,預(yù)計年產(chǎn)1500萬至2000萬臺
- 小米大家電團隊遷址武漢,科技園F棟開啟新篇章:科技與傳統(tǒng)的完美融合
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責(zé)任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。