分布式存儲(chǔ)江湖變幻 后十年誰(shuí)是盟主?

原標(biāo)題:分布式存儲(chǔ)江湖變幻后十年誰(shuí)是盟主?

10年前恐怕沒有人認(rèn)為阿里做的那叫云,甚至連阿里自己那時(shí)可能都不認(rèn)為自己在做云。

5年前分布式存儲(chǔ)概念剛被提出的時(shí)候,也沒有多少人會(huì)覺得它是未來,那時(shí)候談的更多的是軟件定義存儲(chǔ)。

今天,同樣有很多新的技術(shù)在萌生,也許現(xiàn)在還名不見經(jīng)傳,但未來可能會(huì)是某項(xiàng)關(guān)鍵技術(shù)的雛形。

就像這幾個(gè)例子一樣,很多我們現(xiàn)在習(xí)以為常的東西并不是憑空而出,而是經(jīng)過了長(zhǎng)期的演變。云計(jì)算如此,人工智能如此,大數(shù)據(jù)如此,本文要分析的分布式存儲(chǔ)也如此。

書歸正傳,為什么要說分布式存儲(chǔ)這個(gè)話題,又該從哪里講起呢?給出兩個(gè)關(guān)鍵詞,一個(gè)是主流,一個(gè)是江湖。

1

分布式存儲(chǔ),存儲(chǔ)未來

主流。當(dāng)下,說分布式存儲(chǔ)是存儲(chǔ)主流技術(shù),相信沒有人反對(duì)吧。試問還有哪個(gè)存儲(chǔ)廠商沒有分布式存儲(chǔ)產(chǎn)品的?即便是老牌以傳統(tǒng)存儲(chǔ)為主的存儲(chǔ)廠商,如戴爾EMC、IBM也都有分布式存儲(chǔ)產(chǎn)品線,更別提新興的云廠商。試問哪個(gè)企業(yè)還對(duì)分布式存儲(chǔ)技術(shù)一無所知?其實(shí)就連每個(gè)人使用的云空間都是分布式存儲(chǔ)。

除此之外,還有更直觀的數(shù)據(jù)體現(xiàn)。根據(jù)IDC發(fā)布的《中國(guó)軟件定義存儲(chǔ)(SDS)及超融合存儲(chǔ)(HCI)系統(tǒng)市場(chǎng)季度跟蹤報(bào)告,2018年第四季度》顯示,2018年,中國(guó)軟件定義存儲(chǔ)市場(chǎng)規(guī)模同比增長(zhǎng)54.9%。軟件定義存儲(chǔ)在中國(guó)整體存儲(chǔ)市場(chǎng)的占有率穩(wěn)步上升,達(dá)到了22.1%。

前不久IDC發(fā)布的《中國(guó)軟件定義存儲(chǔ)(SDS)及超融合存儲(chǔ)(HCI)系統(tǒng)市場(chǎng)季度跟蹤報(bào)告,2019年第二季度》顯示,2019年上半年,軟件定義存儲(chǔ)市場(chǎng)達(dá)到了52.8%的同比增長(zhǎng)率。

增長(zhǎng)勢(shì)頭迅猛,而且穩(wěn)定??赡苡信笥褧?huì)問,這說的是軟件定義存儲(chǔ),它們和分布式存儲(chǔ)又有什么關(guān)系?應(yīng)該說三者相互交織,很難說誰(shuí)包含的范圍更廣一些。由于軟件定義存儲(chǔ)概念出現(xiàn)的更早,因此到現(xiàn)在IDC依舊沿用的是軟件定義存儲(chǔ)這個(gè)分類方式,并沒有將分布式存儲(chǔ)單獨(dú)作為研究對(duì)象。但是照分布式存儲(chǔ)目前的發(fā)展勢(shì)頭,不排除未來將其作為單獨(dú)研究對(duì)象的可能。

2

多次破繭終成蝶

江湖。有人的地方就有江湖,是江湖就會(huì)有爭(zhēng)斗。分布式存儲(chǔ)發(fā)展到今天,也是一樣。

別看分布式存儲(chǔ)市場(chǎng)格局如今已初見分曉,但過程的曲折、市場(chǎng)的變幻遠(yuǎn)不是今天看起來那么簡(jiǎn)單。

回溯分布式存儲(chǔ)的歷史,最早能追溯到個(gè)人互聯(lián)網(wǎng)時(shí)代,大家耳熟能詳?shù)腂T、電驢,后來企業(yè)用的NAS、并行文件系統(tǒng),以及再后來的HDFS、GlusterFS、Swift、Ceph……直到現(xiàn)在可以說是百花齊放。除去BT、電驢不談,每一項(xiàng)技術(shù)背后代表的是不同時(shí)期、不同需求、不同派別的技術(shù)信仰,競(jìng)爭(zhēng)不可避免,導(dǎo)致的直接結(jié)果是沒有一項(xiàng)技術(shù)能一家獨(dú)大。

至于市場(chǎng)格局更是如此,在關(guān)鍵技術(shù)開源的大背景下,每個(gè)時(shí)期都會(huì)涌入無數(shù)的后來者。而今日再回首,很多存儲(chǔ)廠商已經(jīng)沒了,或倒閉了或被收購(gòu)了,剩下的已是屈指可數(shù)。

市場(chǎng)是無情的,也是最有效的,大浪淘沙,最后剩下的才是金子。因此,今天分布式存儲(chǔ)領(lǐng)域生存下來的玩家必然有一定的長(zhǎng)處,生存還很好的必定是經(jīng)歷過無數(shù)次自我突破、化繭成蝶的歷程。但盡管如此,它們依舊不能絲毫放松。

因?yàn)橐越闕DC的調(diào)研結(jié)果來看,大局基本穩(wěn)定,華為、曙光、XSky、新華三、浪潮一直占據(jù)著前五的位置,但名次時(shí)有變化。換句話說,絲毫松懈都可能引來萬(wàn)劫不復(fù)。

3

曙光ParaStor 10年,分布式存儲(chǔ)10年

這其中,可以說曙光伴隨、推動(dòng)、引領(lǐng)了整個(gè)中國(guó)分布式存儲(chǔ)市場(chǎng)的發(fā)展。下面來具體講講曙光分布式存儲(chǔ)的發(fā)展歷程,從中相信你能讀到整個(gè)中國(guó)分布式存儲(chǔ)發(fā)展史。

曙光分布式存儲(chǔ)產(chǎn)品名叫ParaStor,用三個(gè)關(guān)鍵詞可以概括:十年自主研發(fā)、豐富大規(guī)模部署經(jīng)驗(yàn)和領(lǐng)先市場(chǎng)地位。

10年前曙光為什么就開始做ParaStor?那時(shí)候還是集中存儲(chǔ)的天下。回答這個(gè)問題不難,結(jié)合當(dāng)時(shí)的大環(huán)境,一切都變得順利成章。先進(jìn)計(jì)算當(dāng)時(shí)剛興起,存儲(chǔ)成本在先進(jìn)計(jì)算整個(gè)系統(tǒng)部署中占30%的成本。換句話說,分布式存儲(chǔ)技術(shù)的突破會(huì)對(duì)整個(gè)先進(jìn)計(jì)算的發(fā)展起到極大的促進(jìn)作用。也正因?yàn)榇?,曙光才開始自研分布式存儲(chǔ)系統(tǒng)。

2009年,起源于中科院計(jì)算所集群文件系統(tǒng)的ParaStor正式立項(xiàng),同年發(fā)布V1.0版本。那一年,ParaStor為曙光分布式文件系統(tǒng)奠下了基礎(chǔ)。

隨后,ParaStor開始嶄露頭角,并獲得眾多用戶的青睞。2013年,曙光發(fā)布ParaStor 2.0版本,同年,曙光為央視國(guó)際媒資庫(kù)打造6PB存儲(chǔ)資源池,存儲(chǔ)、管理、共享十幾年珍貴視頻,并在全國(guó)多地氣象局、環(huán)保局項(xiàng)目中脫穎而出。

2014年,曙光做出一項(xiàng)重大調(diào)整,成立存儲(chǔ)事業(yè)部,建立曙光EB級(jí)云存儲(chǔ)實(shí)驗(yàn)室,組織更多資源和更專業(yè)的團(tuán)隊(duì)對(duì)ParaStor進(jìn)行市場(chǎng)推廣。

2015年,ParaStor在IDC中國(guó)NAS市場(chǎng)排名第一。

2016年,ParaStor發(fā)布V2.5版本,并首次進(jìn)入石油行業(yè)。

2017年,ParaStor軟件版本增加SSD Cache功能,首次實(shí)現(xiàn)同時(shí)支持文件/對(duì)象接口。同年,為國(guó)家氣象局構(gòu)建高達(dá)23PB的在線生產(chǎn)存儲(chǔ)資源池。

2018年,全新一代ParaStor產(chǎn)品3.0發(fā)布。此時(shí),數(shù)字化轉(zhuǎn)型已經(jīng)步入深水區(qū),分布式存儲(chǔ)在占據(jù)數(shù)據(jù)中心越來越多份額的同時(shí),也被提出了更多要求,比如融合部署,適應(yīng)用戶多種業(yè)務(wù)類型。這也是第三代ParaStor的重要改進(jìn)方向。

ParaStor300S重塑存儲(chǔ)架構(gòu),支持文件、對(duì)象和塊的存儲(chǔ)服務(wù),滿足不同用戶的實(shí)際需求。這一年,ParaStor在通用計(jì)算、視頻監(jiān)控、衛(wèi)星遙感、生物信息、廣電媒體、數(shù)據(jù)中心等多個(gè)應(yīng)用領(lǐng)域全面開花。今年,ParaStor完成了對(duì)塊的支持,實(shí)現(xiàn)文件、對(duì)象和塊的統(tǒng)一存儲(chǔ)。支持先進(jìn)計(jì)算項(xiàng)目,單套系統(tǒng)容量超過100PB。

回首曙光ParaStor 10年歷程,到現(xiàn)在歷經(jīng)三代產(chǎn)品,也反映了不同時(shí)期的技術(shù)特性、用戶需求。其中,2014、2015年是明顯的分水嶺,自那以后,分布式存儲(chǔ)概念走熱,曙光發(fā)展歷程加快。

截至當(dāng)前,ParaStor為數(shù)千家客戶管理數(shù)EB的存儲(chǔ)空間,客戶遍及政府、氣象、能源、生物、金融、廣電等多個(gè)行業(yè);單一用戶部署規(guī)模100PB;支持13000節(jié)點(diǎn)、甚至更大規(guī)模的項(xiàng)目部署。在IDC排名連續(xù)7年位居國(guó)內(nèi)市場(chǎng)前二,中國(guó)分布式存儲(chǔ)市場(chǎng),絕對(duì)的領(lǐng)先者。

4

下一個(gè)十年,誰(shuí)最可期?

以2019年為界,ParaStor剛走過第一個(gè)10年,就取得了這么多的成就,很難想象接下來還會(huì)有怎樣的突破。畢竟未來有一個(gè)很重要的前提是分布式將成為存儲(chǔ)事實(shí)上的標(biāo)準(zhǔn)。

這當(dāng)然不是空穴來風(fēng)。據(jù)IDC預(yù)測(cè),2017-2022年,全球軟件定義存儲(chǔ)市場(chǎng)規(guī)模的平均增速為14.7%,而中國(guó)軟件定義存儲(chǔ)市場(chǎng)的平均增速為32.5%。有分析師樂觀地預(yù)測(cè),未來3年,在中國(guó)市場(chǎng)上,軟件定義存儲(chǔ)將占據(jù)整個(gè)存儲(chǔ)市場(chǎng)的半壁江山。

另外從業(yè)務(wù)層面看,過去的觀點(diǎn)的是,分布式存儲(chǔ)不太可能承載像數(shù)據(jù)庫(kù)這樣的關(guān)鍵業(yè)務(wù),但事實(shí)是已經(jīng)有不少銀行已經(jīng)在做遷移。換句話說,分布式存儲(chǔ)已經(jīng)越來越深入傳統(tǒng)意義的關(guān)鍵應(yīng)用領(lǐng)域。

這是因?yàn)榘殡S云時(shí)代的全面到來,傳統(tǒng)架構(gòu)和云架構(gòu)之間的界限正變得模糊,架構(gòu)并不是用戶關(guān)心的焦點(diǎn),是否能承載起業(yè)務(wù)需要才是關(guān)鍵。而隨著分布式存儲(chǔ)各方面技術(shù)條件的不斷完善,承載關(guān)鍵業(yè)務(wù)所面臨的挑戰(zhàn)已經(jīng)越來越少,其成為主流也就成了自然而然的事情。

而隨著分布式存儲(chǔ)發(fā)揮的價(jià)值越來越大,其本身也正在呈現(xiàn)出一些新的演進(jìn)方向。其中一個(gè)是融合架構(gòu),分布式存儲(chǔ)在朝著更簡(jiǎn)便、更易用的方式演進(jìn);另一個(gè)重要趨勢(shì)則是閃存化。

多說幾句閃存。過去對(duì)閃存的利用更多是在傳統(tǒng)高端存儲(chǔ)上,但是隨著閃存技術(shù)的發(fā)展,成本的持續(xù)下降,SSD較機(jī)械硬盤的性價(jià)比優(yōu)勢(shì)越來越明顯,在分布式存儲(chǔ)中的占比也越來越多,尤其是在面對(duì)關(guān)鍵業(yè)務(wù)時(shí),閃存幾乎是必選項(xiàng)。另外,越來越多的新型應(yīng)用場(chǎng)景如生物信息、4K高清渲染、人工智能等對(duì)閃存的需求也越來越迫切。

總的來看,分布式存儲(chǔ)的舞臺(tái)正越來越大,特別是隨著閃存、融合架構(gòu)的引入,對(duì)關(guān)鍵業(yè)務(wù)的承載度會(huì)更好,市場(chǎng)也越來越大。舞臺(tái)大了,供玩家發(fā)揮的空間也就更大。所以未來,像曙光這樣有實(shí)力的玩家必然會(huì)在更廣闊的舞臺(tái)上發(fā)揮更大的價(jià)值。

最后,回到題目本身,后十年,誰(shuí)將成為盟主?不知道,但曙光無疑是有力的競(jìng)爭(zhēng)者。

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2019-10-29
分布式存儲(chǔ)江湖變幻 后十年誰(shuí)是盟主?
5年前分布式存儲(chǔ)概念剛被提出的時(shí)候,也沒有多少人會(huì)覺得它是未來,那時(shí)候談的更多的是軟件定義存儲(chǔ)。即便是老牌以傳統(tǒng)存儲(chǔ)為主的存儲(chǔ)廠商,如戴爾EMC、IBM也都有分布式存儲(chǔ)產(chǎn)品線,更別提新興的云廠商。

長(zhǎng)按掃碼 閱讀全文