6月18日,在德國法蘭克福舉行的國際超算大會(ISC2019)上,組織者公布了最新一期的IO500存儲系統(tǒng)性能排名,焱融云成為中國初創(chuàng)企業(yè)中唯一入選榜單的公司,在全球的Storage Vendor(存儲供應商)中排名第八,比肩DDN、Dell EMC、WekaIO、IBM、NetApp、浪潮等一線廠商。
IO500
高性能計算領域,基礎架構設施由超級計算機及高性能存儲及網(wǎng)絡組成。在每年的國際超算大會(ISC)上,公布超級計算機的性能排名,即近日大家熱議的Top500榜單。同樣地,在ISC大會上還會公布IO500榜單,IO500是針對存儲系統(tǒng)性能的排名表。這兩個榜單,標志著相關研究機構及企業(yè),在高性能計算和存儲領域的技術實力和產品水平。
高性能存儲系統(tǒng)的基準性能測試是一項復雜的任務,并行I/O不僅受CPU延遲性能和網(wǎng)絡的影響,還受底層存儲技術和軟件的影響。不同廠商發(fā)布的性能測試結果,往往由于測試方法、工具、參數(shù)甚至測試步驟的先后順序不同,而具有較大的差異性。IO500定義了一個全面的基準性能測試套件,可以對高性能存儲系統(tǒng)進行標準的測試和比較,旨在為用戶提供一個標準的評價依據(jù)。
與計算體系結構的Top500列表類似,IO500不僅提供評價存儲系統(tǒng)性能的關鍵指標,還將作為在業(yè)界促進和共享最佳實踐的資料庫。
從測試方法上,IO500進行兩組測試,分別完成以下場景的測試:
理想狀況下,存儲系統(tǒng)的最優(yōu)性能(例如大文件讀寫),這組測試可以充分發(fā)揮存儲廠商在性能調優(yōu)上的主動性。測試包括:
- IO Easy:write/read
- MDTest Easy: create/stat/delete
IO500專門設置了一組苛刻的測試流程(如隨機讀寫3901 Byte數(shù)據(jù)),以及海量小文件的讀寫,以此來評估存儲系統(tǒng)在極端場景下的性能底線。測試包括:
- IO Hard:write/read
- MDTest Hard:create/stat/read/delete
- Find索引
最終,通過IOPS和帶寬的測試數(shù)據(jù),計算出整個存儲系統(tǒng)的性能評分。
IO500的測試基準,從設計之初,就設立了以下目標:
代表性:IO500的測試基準應該代表在真實系統(tǒng)上觀察到的典型工作負載。這包括可調優(yōu)和優(yōu)化的工作負載,也包括交互的、原始的及不可優(yōu)化的工作負載。IO500利用IOR、MDTEST和標準POSIX來對可優(yōu)化的順序IO、隨機IO以及元數(shù)據(jù)操作等類型的工作負載進行性能評估。
易理解:IO500將生成有意義的度量和評價體系。測試指標對數(shù)據(jù)中心用戶來說是有意義的。盡量將測試偏差降低(即減少測試步驟差異帶來的影響),盡可能使重復測試可獲得相近的結果。對于每個單獨的性能運行,IO500使用以GiB/s和kIOPS為單位進行統(tǒng)計。除了綜合得分之外,還保留了個別值,以方便進行更細致的評估。
可擴展性:可以在任意規(guī)模的大型計算機及存儲系統(tǒng)上運行,并根據(jù)使用的客戶端/服務器端節(jié)點數(shù)量和每個節(jié)點的進程來評估測試結果。
可移植:基準測試應該涵蓋各種存儲技術和非POSIX API。提供不同版本的軟件包和工具,減少用戶在不同平臺上進行測試的時間投入,使測試盡可能流暢地進行。
權威性:IO500旨在提供可信賴的基準性能測試結果,并且防止(無意中)作弊。向IO500提交的報告中,要求披露結果提供者所做的性能優(yōu)化參數(shù)。這些參數(shù)將作為結果的一部分與業(yè)界進行分享,讓其他人通過調整有用的選項來進一步理解測試。
IO500由存儲業(yè)界的國際知名廠商代表和學者組成委員會,公平接受全球廠商、研究機構提供的存儲系統(tǒng)性能測試數(shù)據(jù),并對結果進行發(fā)布,IO500排名已成為高性能存儲領域及其重要的評價指標。
YRCloudFile
YRCloudFile是焱融云推出的高性能分布式存儲,此次參與的是IO500 10節(jié)點測試。IO500 10節(jié)點測試將基準性能測試限制為10個節(jié)點,評估在10節(jié)點上系統(tǒng)發(fā)揮出的最佳性能。這樣的集群規(guī)模十分貼近于大多數(shù)的中小規(guī)模應用場景,其測試數(shù)據(jù)對客戶而言也非常具有參考和借鑒意義,YRCloudFile在這樣的規(guī)模下對集群的優(yōu)化也可以為大量用戶提供最佳實踐。
焱融云YRCloudFile通過支持RDMA、NVMe等新型高性能設備和技術,以及高效的讀寫引擎,降低了數(shù)據(jù)在讀寫過程中的開銷,可擴展的元數(shù)據(jù)集群有效應對海量文件場景下系統(tǒng)對元數(shù)據(jù)操作的壓力(MDTest Hard)。使YRCloudFile在及其有限的硬件配置環(huán)境下,依然發(fā)揮出優(yōu)異的性能,獲得理想的性能基準測試結果。
YRCloudFile所提供的高性能存儲對人工智能(AI)、大規(guī)模仿真(Simulation)、電子設計自動化(EDA)、生命工程(Life Science)、資源勘探等應用領域至關重要。
除了高性能訪問的能力外,YRCloudFile還提供了友好的數(shù)據(jù)治理功能,幫助用戶快速定位系統(tǒng)熱點(FileSystem Hot Spot),系統(tǒng)數(shù)據(jù)分析(FileSystem Insight)等功能,使管理員能更好掌控存儲集群并進行相應調整。
在未來,焱融云還將繼續(xù)在YRCloudFile的性能優(yōu)化上投入更多資源,進一步提升和優(yōu)化性能指標,為人工智能等眾多新興場景提供一流的數(shù)據(jù)管理支持。
免責聲明：本網(wǎng)站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏，概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時，應及時向本網(wǎng)站提出書面權利通知或不實情況說明，并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關文章源頭核實，溝通刪除相關內容或斷開相關鏈接。
