9月20日，在華為全聯(lián)接大會2024期間舉辦的數(shù)據(jù)存儲峰會上，華為公司副總裁、數(shù)據(jù)存儲產(chǎn)品線總裁周躍峰博士發(fā)布全新AI存儲OceanStor A800，以長記憶內(nèi)存新范式全面提升AI大模型訓(xùn)練和推理能力，助力千行萬業(yè)大步邁入數(shù)智時代。
華為公司副總裁、數(shù)據(jù)存儲產(chǎn)品線總裁周躍峰
人類文明從遠古的石器時代，到農(nóng)業(yè)時代、工業(yè)時代，直至如今的數(shù)智時代，數(shù)據(jù)作為發(fā)展新質(zhì)生產(chǎn)力的關(guān)鍵生產(chǎn)要素。人們利用數(shù)據(jù)，在AI大模型、具身智能、AI for science等核心AI領(lǐng)域取得長足發(fā)展。
數(shù)智時代是數(shù)據(jù)的黃金時代，數(shù)據(jù)規(guī)模爆炸式增長、數(shù)據(jù)價值不斷攀升的同時，也面臨xPU與存儲的帶寬不足、算力集群可用度低、推理時延長等挑戰(zhàn)，對存儲提出更高要求。數(shù)智時代呼喚Storage for AI，具備極致性能、高擴展性、數(shù)據(jù)韌性、可持續(xù)發(fā)展、新數(shù)據(jù)范式以及數(shù)據(jù)編織能力的數(shù)據(jù)存儲是通往AI數(shù)智時代的必由之路。
為應(yīng)對以上挑戰(zhàn)，華為發(fā)布全新AI存儲OceanStor A800，在AI大模型高效訓(xùn)練能力的基礎(chǔ)上，大幅增強推理能力，并在集群性能、新數(shù)據(jù)范式上有了跨越式提升，促進AI在千行萬業(yè)落地。
· 單套AI存儲設(shè)備支持十萬卡級大模型訓(xùn)練
通過構(gòu)建前端網(wǎng)卡全共享、控制器與后端SSD盤全互聯(lián)的技術(shù)架構(gòu)，單套存儲設(shè)備可支持10萬卡級集群全互聯(lián)。一套OceanStor A800 存儲最多可實現(xiàn)與19.2萬卡訓(xùn)練集群的靜態(tài)全連接，性能提升40%，空間占用降低80%。
· 以存強算，AI集群可用度提升30%
AI訓(xùn)練中斷頻頻發(fā)生，據(jù)統(tǒng)計AI訓(xùn)練中心持續(xù)訓(xùn)練的時間最長僅為2.6天，導(dǎo)致GPU/NPU必須反復(fù)保存CKPT數(shù)據(jù)。中國移動將華為OceanStor AI存儲用于大模型訓(xùn)練，實現(xiàn)150PB單存儲集群、8TB/s帶寬和2.3億IOPS的能力，集群可用度提升32%，為后續(xù)更大規(guī)模大模型訓(xùn)練提供有力支撐。
· 以存代算，長記憶內(nèi)存型存儲提升推理體驗并降低系統(tǒng)成本
Long context（長上下文）成為大模型推理的必然發(fā)展趨勢，根據(jù)Scaling law，提供足夠高的推理算力和中間Token數(shù)，可大幅提升推理的準確度。通過專業(yè)AI存儲，可長期保存Long context及海量中間推理Token，最大程度提升大模型的邏輯思考和推理能力，尤其是慢思考能力。
OceanStor A800作為業(yè)界首款提供長記憶能力的存儲，創(chuàng)新性采用多級KV緩存機制，將KV-Cache持久化保存并高效使用，讓大模型推理具備長記憶能力，減少在Prefill階段的重復(fù)計算，客戶推理時延降低78%，單個xPU卡的吞吐量提升67%，大幅提升推理體驗的同時降低成本。
數(shù)智時代的全新AI存儲，正在金融信貸、投研分析、醫(yī)療健康、藥物研發(fā)等行業(yè)場景發(fā)揮價值。周躍峰表示，在數(shù)據(jù)的黃金時代，華為以其創(chuàng)新的AI存儲，釋放先進數(shù)據(jù)存力，鑄就數(shù)智時代根基。
- 蜜度索驥：以跨模態(tài)檢索技術(shù)助力“企宣”向上生長
- 2025年全球網(wǎng)絡(luò)安全支出將激增15% | 行業(yè)觀察
- 華為數(shù)據(jù)存儲兩大新品齊發(fā)：全面閃存化，全面向AI
- 數(shù)據(jù)中心太耗電，微軟攜手Constellation Energy探索核能供電新途徑
- 戴爾一周內(nèi)發(fā)生兩起數(shù)據(jù)泄露事件，Atlassian工具成泄露源頭
- 華為ICT學(xué)院年會2024舉辦，ICT學(xué)院3.0計劃正式啟航
- 華為啟動全球金融伙伴“融海計劃”，共創(chuàng)行業(yè)新價值
- 華為聯(lián)合多家伙伴發(fā)布《現(xiàn)代化金融核心系統(tǒng)白皮書：實踐篇》
- 華為發(fā)布數(shù)據(jù)智能解決方案5.0，加速金融大模型應(yīng)用從“賦能”到“產(chǎn)能”
- 華為加速推動鯤鵬昇騰原生創(chuàng)新，未來三年賦能百萬原生人才
- 第九屆華為ICT大賽中國賽區(qū)報名通道開啟，大賽真題集首發(fā)
免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關(guān)資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負任何法律責(zé)任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。
