東數(shù)西算不止于“算”,更需“新存儲”

科技云報道原創(chuàng)。

作為數(shù)字時代的一次大變革,“東數(shù)西算”已然成為了一個“家喻戶曉”的議題。

目前,我國數(shù)據(jù)量占全球18%,算力供需失衡問題亟待解決。正因如此,國家通過“東數(shù)西算”工程,布局建設(shè)“新型算力網(wǎng)絡(luò)體系”,推動算力集約化發(fā)展。不少人將“東數(shù)西算”比肩“南水北調(diào)”、“西氣東輸”等關(guān)乎民生質(zhì)量的浩瀚工程。

然而,在“東數(shù)西算”的宏大場景下,仍面臨諸多現(xiàn)實挑戰(zhàn)?!皷|數(shù)西算”工程的部署,將推動東數(shù)西存(熱點區(qū)域數(shù)據(jù)計算、西部備份存儲)、東數(shù)西訓(東部算法倉庫、西部離線大數(shù)據(jù)分析);將實時性要求不高的業(yè)務(wù)如文檔云、掌上保險、開發(fā)測試等應(yīng)用部署在西部節(jié)點,促進數(shù)據(jù)中心集約化、集群化發(fā)展。

從存儲系統(tǒng)的角度看,這些細分場景帶來了全新的挑戰(zhàn),例如:本地/近場下的熱點數(shù)據(jù)如何高性能存取?海量數(shù)據(jù)如何靈活遷移?存儲系統(tǒng)層操作細節(jié)如何無感化,向客戶呈現(xiàn)便捷業(yè)務(wù)應(yīng)用?數(shù)據(jù)存儲的安全如何保障?如何在滿足“算網(wǎng)共生、智能編排”的架構(gòu)要求基礎(chǔ)上,有效降低存儲成本和能耗?

算力網(wǎng)絡(luò)挑戰(zhàn)下 移動云“新存儲”應(yīng)時而生

在“東數(shù)西算”場景下,任何一家云存儲供應(yīng)商在算力網(wǎng)絡(luò)中都必須面對存儲系統(tǒng)的挑戰(zhàn),即要解決存儲系統(tǒng)高性能、高擴展、易使用的問題。

移動云作為中國移動落實國家“東數(shù)西算”政策的重要一環(huán),應(yīng)時而生走出了一條“新存儲”技術(shù)路線。

立足運營商云“網(wǎng)絡(luò)+安全”的特色優(yōu)勢,移動云以云網(wǎng)融合為基礎(chǔ),構(gòu)建云邊端算力協(xié)同、算網(wǎng)融合、智能編排的社會級算力服務(wù)平臺,包括“基于自研架構(gòu),打造立體泛在的算力分布,統(tǒng)一異構(gòu)封裝,拉動跨域協(xié)同,構(gòu)筑更高效、更彈性、更可信算力基礎(chǔ)設(shè)施”,構(gòu)建出算力網(wǎng)絡(luò)下的新存儲能力。

基于此,移動云存儲系統(tǒng)能夠“扛得住、存得下、用得好”:滿足企業(yè)關(guān)鍵業(yè)務(wù)云化對存儲的性能要求,提供高帶寬、高IOPS、低時延保障;滿足高速增長的數(shù)據(jù)存儲需求,提供易擴展、高吞吐、海量文件高效索引保障;屏蔽復(fù)雜的存儲系統(tǒng)層次操作細節(jié),提供易部署、易操作、簡潔易用的產(chǎn)品形態(tài)。

不僅如此,移動云還從高效無損、無限擴展算力安全等方面多措并舉,致力實現(xiàn)算力的云、邊、端全域覆蓋,豐富公、私、專多類服務(wù)形態(tài),加快跨域資源聯(lián)通、跨域應(yīng)用協(xié)同,具體而言:

(一)高效無損與無限擴展

基于DPU卸載提高效能,拉通裸金屬、虛機、容器等計算形態(tài),支撐應(yīng)用平滑遷移,實現(xiàn)存儲產(chǎn)品的軟硬協(xié)同,算力卸載。通過統(tǒng)一本地存儲、分布式存儲接入框架,結(jié)合彈性無損網(wǎng)絡(luò),打造大規(guī)模高性能計算集群,達成高性能存算協(xié)同。優(yōu)化負載感知調(diào)度、系統(tǒng)內(nèi)動態(tài)電源管理、超高密度存儲、內(nèi)存調(diào)度等,實現(xiàn)綠色節(jié)能和效率提升。構(gòu)建高效敏捷的云原生基礎(chǔ)設(shè)施,打造快速擴縮容、高效交付的能力。

(二)算力安全

基于可信計算和機密計算,實現(xiàn)從底層安全芯片到虛擬機關(guān)鍵應(yīng)用的全棧安全可信,提升算力節(jié)點的安全防護能力。同時基于數(shù)據(jù)全鏈路完整性校驗,確保數(shù)據(jù)準確與安全。

移動云自研存儲引擎 全系存儲產(chǎn)品賦能多業(yè)務(wù)場景

“東數(shù)西算”工程凸顯了數(shù)據(jù)作為一種生產(chǎn)要素的價值,并將其分類治理——對于服務(wù)后臺加工、存儲災(zāi)備、離線分析、存儲備份等對網(wǎng)絡(luò)時延要求不高的“冷數(shù)據(jù)”,優(yōu)先向貴州、內(nèi)蒙古、甘肅、寧夏節(jié)點轉(zhuǎn)移;與此同時,對網(wǎng)絡(luò)時延要求高的“熱數(shù)據(jù)”,選擇在東部城市進行布置。

為了全面適配“東數(shù)西算”多種應(yīng)用需求,移動云基于自研“大云天權(quán)統(tǒng)一存儲引擎”的超高IO性能及跨域糾刪能力,推進分布式塊存儲、對象存儲、文件存儲等存儲全系產(chǎn)品升級,深度覆蓋多種應(yīng)用場景。

塊存儲產(chǎn)品:基于天權(quán)存儲引擎,打造百萬IOPS、百微秒時延、4GB/s吞吐的新一代云硬盤產(chǎn)品,可有效支撐大型數(shù)據(jù)庫、實時日志分析等IO密集型以及AI訓練、基因測序等高吞吐型業(yè)務(wù)場景,滿足現(xiàn)場及近場計算訴求。對象存儲產(chǎn)品:通過存儲多協(xié)議協(xié)同(Storage Mesh),實現(xiàn)“存算一體,數(shù)隨算走”,打破“存儲墻”,連通“數(shù)據(jù)孤島”,打造“數(shù)據(jù)隨心可取”的存儲服務(wù)體系。文件存儲產(chǎn)品:在基于對象存儲的跨域糾刪能力基礎(chǔ)上,自研移動云文件存儲(CFN版本),基于EOS跨域糾刪(數(shù)據(jù))及跨域KV數(shù)據(jù)庫(元數(shù)據(jù))有效支撐實時流媒體文件編輯等跨地域數(shù)據(jù)共享場景,實現(xiàn)多點接入、簡單配置、隨心訪問。

總體而言,在產(chǎn)品體系賦能方面,移動云能夠實現(xiàn)數(shù)據(jù)跨域共享、就近訪問,支持數(shù)據(jù)冷熱智能分層、按需流動,具備多級容災(zāi)能力,滿足亞毫秒級訪問時延,向客戶提供高性能、高擴展、高并發(fā)的數(shù)據(jù)存儲服務(wù)。

作為底層基礎(chǔ)設(shè)施能力之一,移動云云存儲產(chǎn)品的部署目前已覆蓋移動云所有資源池。其中,“天權(quán)”存儲系列產(chǎn)品部署規(guī)模超3萬臺服務(wù)器,容量規(guī)模超2500 PB,服務(wù)80余萬家客戶。且大云天權(quán)統(tǒng)一存儲引擎技術(shù)自主可控,適配國產(chǎn)化服務(wù)器,實現(xiàn)“一云多芯”,真正做到安全又高效。

響應(yīng)“雙碳”政策 移動云存儲實現(xiàn)“節(jié)能減排”

算力服務(wù)過程中,海量數(shù)據(jù)處理帶來的“能耗和碳排放”問題也備受關(guān)注。就此,移動云響應(yīng)國家“雙碳”政策,在打造新一代算網(wǎng)存儲能力時已考慮相關(guān)對策。

例如,通過上文提到的“存儲多協(xié)議協(xié)同”實現(xiàn)“存算一體,數(shù)隨算走”,構(gòu)建“數(shù)據(jù)隨心可取”的綠色節(jié)能數(shù)據(jù)中心,以及在技術(shù)上根據(jù)對象存儲多規(guī)格以及多規(guī)格間的智能數(shù)據(jù)分層特性,讓冷數(shù)據(jù)逐步流動到存儲成本更低、能耗開銷更低的存儲類型中,達到節(jié)能減排。

具體到產(chǎn)品表現(xiàn),移動云第四代對象存儲實現(xiàn)跨域糾刪,使數(shù)據(jù)冗余機制可以從3副本的300%冗余降至6+6糾刪碼形式的200%冗余,投資成本降低33%。

未來,在算網(wǎng)融合優(yōu)勢加持下,移動云將不斷創(chuàng)新存儲技術(shù)、優(yōu)化全線存儲產(chǎn)品,兼顧安全高效與綠色低碳,為“促進東西部平衡發(fā)展、提升產(chǎn)業(yè)鏈抗風險能力、賦能行業(yè)脫碳增長”貢獻力量。

極客網(wǎng)企業(yè)會員

免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2022-06-22
東數(shù)西算不止于“算”,更需“新存儲”
東數(shù)西算不止于“算”,更需“新存儲”

長按掃碼 閱讀全文