元核云CEO:金融企業(yè)未來存儲的必經之路

大數據、云計算、人工智能在今天看來早已不是什么新鮮事物,這些領域的快速發(fā)展推動著金融行業(yè)的不斷創(chuàng)新,比如在移動支付、互聯網銷售、生物識別認證、智能安全監(jiān)測、大數據分析授信、遠程開戶等業(yè)務方面全面推進,同時信息化系統中已不單單只是存儲著結構化的信息數據,比如金融行業(yè)各自的APP、多媒體終端、電話銷售、銷售行為可回溯的雙錄等方面都存在著大量的音頻、視頻、圖片、地理位置等非結構化的數據存儲需求。

業(yè)內專家和權威第三方調查機構普遍認為,海量數據時代已經到來。各類復雜數據中,85%以上是屬于廣泛用于信息網絡、物聯網、電子商務等場景中的非結構化數據。由于非結構化數據的特點,其數據量遠遠大于結構化的文件,金融行業(yè)已經面臨著數據存儲容量的大規(guī)模增長。許多企業(yè)用戶已經意識到軟件定義分布式存儲技術的重要性,基于我們在存儲領域多年的實施和應用經驗,今天有幸和大家分享我積累的一些經驗和見解。

元核云CEO:金融企業(yè)未來存儲的必經之路

元核云CEO 王凌云

元核云作為一家提供企業(yè)級軟件定義存儲的供應商,從這幾年合作的客戶(單一客戶存儲數量超40PB)以及實際案例中歸納出時下海量數據存儲情況的幾個特征:

1、數據體量巨大:簡單來講就是數據存儲單位已經從TB級發(fā)展為PB級;

2、數據類型繁多:比如用戶行為記錄、影像圖片、音頻、視頻、地理位置、文檔、日志等等;

3、商業(yè)價值高:數據收集后,進行有效統計分析帶來的商業(yè)價值極高,數據已經成為企業(yè)的核心競爭資產;

4、處理速度快:對于海量的數據,金融企業(yè)往往要求處理數據的速度必須得快,更快挖掘數據價值才可以創(chuàng)造更好的企業(yè)價值。

面對以上海量數據存儲特征,傳統的信息化存儲方式也面臨著巨大的挑戰(zhàn):

1、高可靠性:數據對于任何一個行業(yè)來說都是企業(yè)的核心資產,對于金融行業(yè)來說更是重中之重,一切的業(yè)務都建立在數據的基礎之上。當數據最終存儲于硬件介質中,硬件隨著使用的時長增加,將面臨著設備故障、電器老化、自然損耗等問題。海量數據背景下,存在數量眾多的存儲硬件設備,當設備發(fā)生故障時,往往可能帶來數據的丟失或者需要長時間的數據恢復。這樣會給金融企業(yè)的業(yè)務開展帶來無法承擔的損失。

2、靈活可控性:從我們與金融公司合作的經驗來講,隨著數據的快速增長,實現快速擴容也成為滿足許多企業(yè)進一步發(fā)展的必然條件。虛擬化技術的發(fā)展使得計算資源得以池化,使得業(yè)務系統所需要的計算資源能夠按需分配,彈性擴展。同樣,企業(yè)也需要建立存儲的資源池,并能夠按需分配和動態(tài)增加存儲資源,滿足業(yè)務發(fā)展的需要。

3、高并發(fā),低延遲的數據訪問方式:在海量數據的應用場景下,對于數據的使用方式,企業(yè)提出了更高的要求。面對著高密度數據運算、互聯網用戶的高并發(fā)訪問、實時數據分析、機器學習等多種應用場景,數據存儲系統必須要滿足更高并發(fā)的數據訪問,同時需要保證較低的響應時效。簡單來說,即是需要更為高效的性能表現。而傳統的NAS、SAN存儲已經有30多年的歷史,在其設計之初并非針對如此龐大數據量場景,因此會出現諸如文件索引緩存、服務器機頭等技術設計上的先天瓶頸。在海量數據存儲場景下,性能表現也會急劇下降。

4、數據使用方式變化:大規(guī)模海量數據應用場景下,隨著數據的應用方式多樣化,需要提供更細粒度的數據管理和使用方式,例如在近年來普遍提到的存儲即服務的思路,更推崇將數據存儲能力以服務的方式進行暴露,比如:對象存儲服務方式。這一方式能有效地降低數據使用方對存儲系統的深度耦合性。

而傳統存儲仍然普遍通過塊設備或文件系統的方式提供存儲能力,這就大大的限制了數據存儲的使用場景。同時由于塊設備和文件系統需要大量的初始化動作和對于客戶端的要求,也增加了長期數據運維的成本。

相對于傳統存儲,新一代的軟件定義的分布式存儲理念已被提出多年。與我們合作的企業(yè)都遇到了數據量的大規(guī)模增長情況,而分布式存儲技術正好能符合這些企業(yè)對于當下和未來大規(guī)模數據存儲的需求。

縱觀國際國內技術發(fā)展趨勢,軟件定義的分布式存儲技術已經成為越來越多金融企業(yè)IT管理者的選擇。

元核云CEO:金融企業(yè)未來存儲的必經之路

元核云正是專注于金融行業(yè)的軟件定義分布式存儲公司。其自主研發(fā)的元核云分布式存儲產品基于開源的Ceph軟件為架構核心,企業(yè)客戶不用再擔心被閉源產品所綁架。同時,該產品在Ceph的基礎上進行了深度優(yōu)化和完善。比如:我們在性能方面針對海量小文件場景、數據IO路徑、高速網絡、Crush算法進行了優(yōu)化;在安全穩(wěn)定性方面設計了故障自動隔離、防數據靜默損毀的數據自動校驗、數據智能恢復等機制;在管理方面研發(fā)了全新的智能運維管理平臺,支持跨數據中心多集群的統一管理,輕松擴容和規(guī)劃故障隔離域,監(jiān)控發(fā)現異常時郵件、短信、電話告警等運維功能。

目前元核云已經幫助中國平安、中國人壽、華潤集團、微眾銀行、招商金融等大型企業(yè)完成了分布式存儲技術的引入和轉型。擁有金融行業(yè)最大的Ceph存儲案例,支撐了千億級對象數據存儲和上萬個虛擬機運行,連續(xù)4年零故障穩(wěn)定運營記錄。

極客網企業(yè)會員

免責聲明:本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網站出現的信息,均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后,將會依法盡快聯系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。

2018-08-23
元核云CEO:金融企業(yè)未來存儲的必經之路
大數據、云計算、人工智能在今天看來早已不是什么新鮮事物,這些領域的快速發(fā)展推動著金融行業(yè)的不斷創(chuàng)新,比如在移動支付、互聯網銷售、生物識別認證、智能安全監(jiān)測、大數

長按掃碼 閱讀全文