駛向智能海洋深處,華為存儲(chǔ)的無盡想象

原標(biāo)題:駛向智能海洋深處,華為存儲(chǔ)的無盡想象

1519年9月20日,葡萄牙航海家麥哲倫率領(lǐng)探險(xiǎn)隊(duì)經(jīng)直布羅陀海峽,開始環(huán)球航行。

一年多以后,他們穿越了一個(gè)狂風(fēng)巨浪、險(xiǎn)灘暗礁的海峽,來到了一片茫茫無際的大洋。在其中航行了三個(gè)月,從南美洲越過關(guān)島,抵達(dá)菲律賓群島,始終沒有遇到一次大的風(fēng)浪。這群世界上第一批全球航行的隊(duì)員,將這片安全的海域稱之為“太平洋”。

可以說,太平洋具備了海洋最高級(jí)的一切特征——深邃、寬廣、巨大。在科技的語境中,它和今天新基建環(huán)境下的數(shù)據(jù)洪流如出一轍。

既然海洋并不是在任何時(shí)候都平靜美麗,地震、海嘯、臺(tái)風(fēng)……自然之力曾無數(shù)次向人類宣示它的瘋狂。那么,憑什么我們會(huì)認(rèn)為海量數(shù)據(jù)的暴漲也會(huì)乖乖被人類所蟄伏呢?

云計(jì)算、大數(shù)據(jù)、人工智能等新一代信息技術(shù)的產(chǎn)業(yè)化,讓數(shù)據(jù)以前所未有的爆炸式增長,奔涌到各行各業(yè)面前,需要更強(qiáng)大的基礎(chǔ)設(shè)施來應(yīng)對(duì)海量數(shù)據(jù)。

(華為重磅發(fā)布OceanStor存儲(chǔ)Pacific系列)

最近,華為發(fā)布的OceanStor存儲(chǔ) Pacific系列,就針對(duì)最壯闊、也最險(xiǎn)峻的海量數(shù)據(jù)場景,揚(yáng)起了迎擊驚濤的風(fēng)帆。這意味著,數(shù)據(jù)存儲(chǔ)不再是一件“看天吃飯”的事,正在被人力一點(diǎn)一滴地?cái)[渡至彼岸。

靜謐中醞釀驚濤:存儲(chǔ)海量數(shù)據(jù)的產(chǎn)業(yè)暗涌

如果我們用誠實(shí)而謙遜的視角來審視即將到來的智能時(shí)代,會(huì)發(fā)現(xiàn)海量數(shù)據(jù)正如同季風(fēng)一樣,既帶來了充沛的智能雨水,也埋藏著不穩(wěn)定的因素。

簡單總結(jié)一下的話,存儲(chǔ)海量智能數(shù)據(jù)的海域中,可能導(dǎo)致哪些自然災(zāi)害:

首先,暴漲的洪流。5G、AI、IoT等的廣泛應(yīng)用,讓現(xiàn)在各行各業(yè)對(duì)數(shù)據(jù)存儲(chǔ)的量級(jí)需求越來越大,數(shù)據(jù)如海浪般席卷而來,不僅讓機(jī)房和數(shù)據(jù)中心的存儲(chǔ)成本日漸上升,而且在傳統(tǒng)的服務(wù)器支撐下,已經(jīng)出現(xiàn)了部分硬性數(shù)據(jù)存儲(chǔ)不下的現(xiàn)實(shí)問題。

比如1小時(shí)8K超高清視頻占用的存儲(chǔ)空間,是1080P高清視頻的40倍以上;5G讓工業(yè)互聯(lián)、遠(yuǎn)程診療、自動(dòng)駕駛成真的同時(shí),也給運(yùn)營商帶來了10倍以上數(shù)據(jù)增長壓力;基因測(cè)序的商業(yè)化普及,日產(chǎn)出的數(shù)據(jù)高達(dá)6TB。

如果這些數(shù)據(jù)都無法被存儲(chǔ),或是迫于空間成本有限而限期刪除,那么對(duì)其的挖掘、訓(xùn)練、利用自然也成了無水之源、無本之末。而調(diào)查顯示,由于傳統(tǒng)存儲(chǔ)系統(tǒng)架構(gòu)與成本的限制,當(dāng)前企業(yè)數(shù)據(jù)僅有不到2%被保存。

如何將爆發(fā)式增長的數(shù)據(jù)以高性價(jià)比儲(chǔ)存、妥帖挖掘,就成了存儲(chǔ)行業(yè)的新任務(wù)。

其次,異構(gòu)的暗礁。

智能時(shí)代的多場景復(fù)雜部署,數(shù)據(jù)庫面臨的分布式架構(gòu)挑戰(zhàn),數(shù)據(jù)的異構(gòu)性正在沖擊存儲(chǔ)的極限。

有的數(shù)據(jù)被儲(chǔ)存在不同結(jié)構(gòu)的計(jì)算硬件中,大型機(jī)、小型機(jī)、工作站、PC、手機(jī)、傳感器等等,一切皆有可能。數(shù)據(jù)的格式也在增多,從傳統(tǒng)的數(shù)據(jù)庫、二維數(shù)據(jù),逐漸擴(kuò)展到語音、圖像、視頻等等新型多結(jié)構(gòu)數(shù)據(jù),還可能被分別存儲(chǔ)在世界各地的不同地點(diǎn)……調(diào)查顯示,到2025年180ZB規(guī)模的數(shù)據(jù)中,有95%是非結(jié)構(gòu)化的數(shù)據(jù),它們以分散的、不完整、不規(guī)則的形式,被接入到數(shù)據(jù)平臺(tái)中。

比如智慧城市的建設(shè)過程中,就既有來自登記信息、地理信息系統(tǒng)這樣的結(jié)構(gòu)化數(shù)據(jù),也有傳感器檢測(cè)這樣來源多樣的數(shù)據(jù),以及行為描述等難以被記錄的數(shù)據(jù)。想要對(duì)異構(gòu)數(shù)據(jù)進(jìn)行交換和共享,也對(duì)當(dāng)下互聯(lián)網(wǎng)存儲(chǔ)系統(tǒng)提出了新的挑戰(zhàn)。

最后,產(chǎn)業(yè)板塊的地震帶。

太平洋是離我們最親近的海洋,而環(huán)抱著它的板塊擠壓地帶,也成為地球上最不穩(wěn)定的部分。圍繞千行萬業(yè)的基座——數(shù)據(jù)存儲(chǔ),在托舉起產(chǎn)業(yè)智能的時(shí)候,也可能引發(fā)行業(yè)的地震。

一方面,數(shù)據(jù)的暴漲帶來存儲(chǔ)瓶頸,會(huì)直接引發(fā)全社會(huì)對(duì)數(shù)據(jù)空間的爭奪,存儲(chǔ)成本的上漲與數(shù)字化不可逆轉(zhuǎn)的潮流相摩擦,將使不少行業(yè)面臨困局;

另外,數(shù)據(jù)存儲(chǔ)的本質(zhì)意義是為了更高效地處理、分析、利用,所以數(shù)據(jù)存儲(chǔ)行業(yè)不僅要將局部分散的數(shù)據(jù)建立起全局、統(tǒng)一的邏輯能力,解決數(shù)據(jù)的分片機(jī)制;還要讓數(shù)據(jù)管理使能社會(huì)經(jīng)營業(yè)務(wù)流程,打破不同存儲(chǔ)協(xié)議之間的孤島,讓海量數(shù)據(jù)得以在整個(gè)計(jì)算海域內(nèi)自由可靠地奔涌、流轉(zhuǎn)、共享,轉(zhuǎn)化成新的產(chǎn)業(yè)競爭力。

如果說,麥哲倫一行憑借幸運(yùn),恰好遇上了這片海域最風(fēng)平浪靜的時(shí)刻,那么產(chǎn)業(yè)數(shù)字化的席卷,可能需要多一點(diǎn)審慎的思考,思考如何征服數(shù)據(jù)存儲(chǔ)這片疆域,讓萬物智能驅(qū)動(dòng)風(fēng)帆駛向更遠(yuǎn)處。

鍛造存儲(chǔ)巨輪:華為OceanStor存儲(chǔ)Pacific系列的渡海之旅

既然作為數(shù)字海洋基座的數(shù)據(jù),驅(qū)動(dòng)著智能技術(shù)使能全社會(huì)的轉(zhuǎn)型升級(jí)。深耕智能基建的華為,自然不會(huì)缺席。

華為最新一代OceanStor存儲(chǔ)Pacific系列,就是幫助產(chǎn)業(yè)者安全橫渡數(shù)據(jù)海洋所打造的一艘現(xiàn)代化巨輪。在三個(gè)核心部件,鍛造出了全新的價(jià)值想象:

一是技術(shù)的桅桿。

數(shù)據(jù)的多源異構(gòu)、應(yīng)用場景的廣泛覆蓋、跨硬件的架構(gòu)難題,是產(chǎn)業(yè)應(yīng)用數(shù)據(jù)、冶煉智能、賦能業(yè)務(wù)的核心阻礙。所以在華為 OceanStor存儲(chǔ)Pacific系列中,華為就用前沿的技術(shù)矩陣打造了一個(gè)創(chuàng)新的桅桿,成為數(shù)字航海強(qiáng)有力的支撐。

首先,華為OceanStor存儲(chǔ)此次推出的全新一代Pacific系列,就針對(duì)海量數(shù)據(jù)場景,打造了專用硬件高密大容量存儲(chǔ),可以在5U空間里支持120塊硬盤,密度達(dá)到業(yè)界通用存儲(chǔ)型服務(wù)器的2.67倍,空間節(jié)省62.5%;

除了硬件之外,華為還結(jié)合多協(xié)議融合互通、高效縮減算法、多級(jí)可靠機(jī)制等軟件創(chuàng)新,將硬件的能力充分調(diào)動(dòng)起來,提供了傳統(tǒng)服務(wù)器所無法承載的能力。比如依托系列化硬件,以分布式超容量擴(kuò)展為主體,結(jié)合下一代彈性EC算法、多協(xié)議無損互通等,可以讓存儲(chǔ)資源在面對(duì)AI、HPC、視頻等不同高并發(fā)數(shù)據(jù)數(shù)據(jù)時(shí),提供更可靠的解決方案。與業(yè)界開源系相比,可以達(dá)到93%的有效利用率。

軟硬件的協(xié)同作用,讓華為OceanStor存儲(chǔ)Pacific系列的桅桿,既堅(jiān)固可靠,又柔韌有彈性,同時(shí)滿足海量存儲(chǔ)與不同場景部署的訴求,也成為業(yè)界技術(shù)變革的風(fēng)向標(biāo)。

二是高效的發(fā)動(dòng)機(jī)。

數(shù)據(jù)存儲(chǔ)就如同航母的發(fā)動(dòng)機(jī),怕它不動(dòng),又怕它亂動(dòng)。既不能停擺,又需要足夠的能效來保障船只行駛的更遠(yuǎn),因此,華為率先推出可得容量的商業(yè)模式,基于領(lǐng)先的數(shù)據(jù)冗余保護(hù)和縮減技術(shù),幫助用戶降低海量存儲(chǔ)的采購和使用門檻。

在性能和可靠性不降低的前提下,內(nèi)部vNode技術(shù)可讓磁盤利用率達(dá)到93%,相比業(yè)界平均水平領(lǐng)先40%以上。熱、溫、冷數(shù)據(jù)按需自動(dòng)分級(jí)到閃存、磁盤和藍(lán)光介質(zhì),數(shù)據(jù)自由流動(dòng)無需人工干預(yù),進(jìn)一步降低運(yùn)維成本。

而通過業(yè)界首個(gè)文件、大數(shù)據(jù)、對(duì)象協(xié)議無損互通,華為OceanStor存儲(chǔ)Pacific系列解決了傳統(tǒng)網(wǎng)關(guān)方式的性能和語義損失問題,讓一套存儲(chǔ)可以支撐多個(gè)業(yè)務(wù)環(huán)節(jié)的數(shù)據(jù)處理,直接幫助客戶節(jié)省空間。

這些效率效能上的加持,打破了數(shù)據(jù)存儲(chǔ)的服務(wù)邊界,讓更多行業(yè)可以大膽擁抱數(shù)據(jù)基礎(chǔ)設(shè)施,向智能時(shí)代全速前進(jìn)。

三是產(chǎn)業(yè)的船錨。

正如前面所說,華為OceanStor存儲(chǔ)Pacific系列的誕生,是華為智能計(jì)算戰(zhàn)略布局下,海量數(shù)據(jù)存儲(chǔ)與產(chǎn)業(yè)數(shù)字化之間的重要通道。因此,與行業(yè)場景聯(lián)動(dòng)的能力也就至關(guān)重要。

目前看來,華為OceanStor存儲(chǔ)Pacific系列產(chǎn)品并不局限于當(dāng)一個(gè)沒有感情的數(shù)據(jù)容器,而是通過眾多技術(shù)手段來幫助企業(yè)釋放數(shù)據(jù)價(jià)值,反哺數(shù)字化轉(zhuǎn)型。

比如推出的數(shù)據(jù)管理系統(tǒng)DMS,就打破了華為存儲(chǔ)系統(tǒng)和第三方架構(gòu)的藩籬,將幾種協(xié)議數(shù)據(jù)面融合互通,讓企業(yè)數(shù)據(jù)的平臺(tái)化應(yīng)用更簡單,擺脫數(shù)據(jù)孤島的困境。整體架構(gòu)的設(shè)計(jì)也不斷不斷進(jìn)行調(diào)優(yōu)和變化,部分分布式場景還支持虛擬化和云平臺(tái)的場景應(yīng)用……

通過這些手段,充分滿足海量數(shù)據(jù)場景不同的存儲(chǔ)需求,簡化數(shù)據(jù)應(yīng)用的門檻,把數(shù)據(jù)的利用價(jià)值提升到最大限度。

因此,存儲(chǔ)得以由單一硬件向數(shù)據(jù)產(chǎn)業(yè)進(jìn)化,融入到整個(gè)新基建浪潮的時(shí)代洪流機(jī)遇之中。

萬物智能的海洋深處,華為存儲(chǔ)的無盡想象

華為OceanStor存儲(chǔ)Pacific系列的推出,除了推動(dòng)社會(huì)數(shù)字化大航海,也帶動(dòng)了存儲(chǔ)市場自身進(jìn)入了升級(jí)序列。這也引發(fā)了我們的好奇,華為存儲(chǔ)是如何在數(shù)年間,突破層層技術(shù)難關(guān)與產(chǎn)業(yè)高地,走到引領(lǐng)行業(yè)蝶變,實(shí)現(xiàn)價(jià)值自證的極限?

太平洋上,曾經(jīng)爆發(fā)過不少知名的戰(zhàn)爭。而華為在數(shù)據(jù)存儲(chǔ)市場的航海,背后的戰(zhàn)略部署在無形中也與海域作戰(zhàn)不謀而合?;蛟S我們可以從三場戰(zhàn)役,來理解華為深入存儲(chǔ)賽道的核心戰(zhàn)力。

第一戰(zhàn):車輪行動(dòng)。

在一場針對(duì)洛斯內(nèi)格羅斯島的空襲戰(zhàn)斗中,面對(duì)敵人占據(jù)優(yōu)勢(shì)的戰(zhàn)況,麥克阿瑟選擇了開啟一場“賭博”,要求偵察部隊(duì)“迅速打擊,出奇制勝”。也就是著名的車輪行動(dòng),即如果沒有不必要的傷亡,就繼續(xù)前進(jìn),占領(lǐng)附近的機(jī)場,并迅速予以增援。經(jīng)過一周的戰(zhàn)斗,最終憑借車輪行動(dòng)徹底贏得了戰(zhàn)斗。

這與華為整個(gè)存儲(chǔ)產(chǎn)品的成長史異曲同工。可以說華為存儲(chǔ)的發(fā)展進(jìn)程,就是不斷攻占存儲(chǔ)的技術(shù)高地,幫助客戶解決問題,進(jìn)而實(shí)現(xiàn)自我價(jià)值。

比如2014年,華為率先提出了融合存儲(chǔ)的概念,把存儲(chǔ)、備份等五個(gè)大點(diǎn)進(jìn)行融合,引發(fā)了市場跟風(fēng)效應(yīng)。也是在此時(shí),華為存儲(chǔ)一躍成為國內(nèi)市場的排行第一。

再比如海量存儲(chǔ)的需求,自2009年首次發(fā)布第一代文件存儲(chǔ)以來,華為持續(xù)投入海量數(shù)據(jù)存儲(chǔ)領(lǐng)域。2019年華為就發(fā)布了 OceanStor存儲(chǔ)Pacific系列的前身,與勘探、金融、基因測(cè)序、運(yùn)營商等開始共同構(gòu)筑場景案例。而華為OceanStor存儲(chǔ)Pacific系列更是集結(jié)了華為在存儲(chǔ)軟、硬件方面的多年積累。

在此基礎(chǔ)上,華為還砸探索新的存儲(chǔ)系統(tǒng)能力,比如嘗試打造顆粒級(jí)、內(nèi)核級(jí)可靠性,進(jìn)一步優(yōu)化內(nèi)存與CPU之間的互聯(lián)互通……基于基礎(chǔ)能力、不間斷的技術(shù)迭代,也讓華為存儲(chǔ)得以在“新基建”的機(jī)遇關(guān)頭,成為數(shù)字化的產(chǎn)業(yè)基石。

2.冰山行動(dòng)。

在沖繩島上,曾經(jīng)爆發(fā)過太平洋戰(zhàn)場中規(guī)模最大的兩棲登陸行動(dòng)。航空轟炸+地面登陸,最終為二戰(zhàn)勝利奠定了基礎(chǔ)。

而在華為存儲(chǔ)的戰(zhàn)略中,我們也看到了對(duì)軟件與硬件的協(xié)同作戰(zhàn),發(fā)揮到了極致。

前面我們提到,華為OceanStor存儲(chǔ)Pacific系列的高密度硬件+多個(gè)軟件創(chuàng)新,引領(lǐng)了整個(gè)存儲(chǔ)產(chǎn)業(yè)的航向標(biāo)。

實(shí)際上,早在2008年,華為就開始探索軟硬件協(xié)同的存儲(chǔ)系統(tǒng)方案。當(dāng)時(shí),華為將底盤和控制器的軟件結(jié)合起來,通過盤庫配合把性能方面做到極致。

2015年,華為又推出了雙活解決方案,把華為存儲(chǔ)能力和華為DWDM能力進(jìn)行融合,在醫(yī)院、金融、運(yùn)營商的系統(tǒng)中得到了廣泛應(yīng)用。

在軟件定義的時(shí)代,華為也堅(jiān)持保留自己硬件定義的能力。這與很多存儲(chǔ)的SDS廠商不同,但在今天海量數(shù)據(jù)的極限場景下,卻借由華為 OceanStor存儲(chǔ)Pacific系列展現(xiàn)出了硬件工藝與軟件算法所能達(dá)到的新高度。

3.攻占硫磺島。

“一島定乾坤”的故事,沒少在太平洋中上演,比如著名的中途島,以及少有人知的硫磺島。敵方頑強(qiáng)堅(jiān)守的硫磺島,最終憑借浴血奮戰(zhàn),得以成為打開本土戰(zhàn)場的重要通道。

而在存儲(chǔ)領(lǐng)域里, AI是行業(yè)迭代的主旋律,也是華為所必須拿下的硫磺島。

所以在OceanStor智能分布式存儲(chǔ)系統(tǒng)中,“Storage for AI”(為AI而存)和“AI in Storage”(存儲(chǔ)智能)就成為整個(gè)戰(zhàn)略部署的主線。

像在華為OceanStor存儲(chǔ)Pacific系列中,就將AI融入存儲(chǔ)全生命周期管理。比如利用AI算法的能力,加上智能存儲(chǔ)管理系統(tǒng),以及整個(gè)華為云的智慧能力,將軟、硬、云三個(gè)AI有機(jī)體結(jié)合在一起,對(duì)不同的負(fù)載場景進(jìn)行反復(fù)學(xué)習(xí),不斷提高存儲(chǔ)效率和資源利用率,從而管理上盡可能減少人工操作,避免人為故障。

值得一提的是,這些AI模型還會(huì)在華為自己的業(yè)務(wù)流程和IT系統(tǒng)中進(jìn)行實(shí)踐,確保算法模型成熟度之后,在華為OceanStor存儲(chǔ)Dorado系列、Pacific系列等不同系列里面進(jìn)行推廣和使用,保障整體的可靠性。

而為了讓AI應(yīng)用平臺(tái)能夠更好地作業(yè),華為存儲(chǔ)的Storage for AI也努力發(fā)揮最大效益,在自動(dòng)駕駛、環(huán)境監(jiān)測(cè)、智慧交通等復(fù)雜的海量數(shù)據(jù)場景中,通過協(xié)議的互通,在管理面還是數(shù)據(jù)面進(jìn)行打通,減少了數(shù)據(jù)的搬遷,可以直接縮短算法的訓(xùn)練成型時(shí)間,讓萬物智能距離現(xiàn)實(shí)更進(jìn)一步。

我們常說數(shù)據(jù)是智能時(shí)代的“石油”,它的采集、存儲(chǔ)、運(yùn)輸、冶煉、使用等等,整合在一起決定了新的生產(chǎn)力能效。

正如華為數(shù)據(jù)存儲(chǔ)與機(jī)器視覺產(chǎn)品線總裁周躍峰所說,海量數(shù)據(jù)在企業(yè)數(shù)字化轉(zhuǎn)型中扮演著越來越重要的角色,然而當(dāng)前只有2%的數(shù)據(jù)被保存、保存下來的數(shù)據(jù)只有10%得到分析利用。

存儲(chǔ)看起來只是一件小事,卻決定著數(shù)據(jù)能不能被安全、有效、低成本地抵達(dá)產(chǎn)業(yè)中樞,轉(zhuǎn)化為服務(wù)千行萬業(yè)的燃料。

華為存儲(chǔ)的探索,或許可以幫我們?cè)诔脸梁lF之中,踏實(shí)地航行在智能時(shí)代的無限路途。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2020-06-01
駛向智能海洋深處,華為存儲(chǔ)的無盡想象
數(shù)據(jù)的格式也在增多,從傳統(tǒng)的數(shù)據(jù)庫、二維數(shù)據(jù),逐漸擴(kuò)展到語音、圖像、視頻等等新型多結(jié)構(gòu)數(shù)據(jù),還可能被分別存儲(chǔ)在世界各地的不同地點(diǎn)……調(diào)查顯示,到2025年180ZB規(guī)模的數(shù)據(jù)中,有95%是非結(jié)構(gòu)化的數(shù)

長按掃碼 閱讀全文