11月29日,在Flink Forword Asia 2024上,阿里云表示正主導(dǎo)研發(fā)Flink2.0,并首次公開展示其技術(shù)細(xì)節(jié),F(xiàn)link2.0將全面擁抱大模型,同時(shí)新增云原生存算分離、流批一體、兼容流式湖倉等特點(diǎn),是該技術(shù)誕生十年以來最大的升級(jí)之一。會(huì)上,阿里云還宣布開源下一代流存儲(chǔ) Fluss 項(xiàng)目,可為Flink 提供實(shí)時(shí)流存儲(chǔ)底座,進(jìn)一步提升實(shí)時(shí)流計(jì)算的性能。
Flink2.0將全面擁抱大模型
十幾年前,移動(dòng)互聯(lián)網(wǎng)時(shí)代應(yīng)用的爆發(fā)對(duì)流計(jì)算提出了新的需求,流計(jì)算引擎成為了實(shí)時(shí)數(shù)倉、實(shí)時(shí)推薦、實(shí)時(shí)分析、實(shí)時(shí)大屏、實(shí)時(shí)風(fēng)控等場(chǎng)景的核心技術(shù)之一。2014年,Apache Flink正式誕生,憑借高吞吐量和精準(zhǔn)實(shí)時(shí)數(shù)據(jù)處理的能力,F(xiàn)link迅速超越Storm、Spark Streaming等傳統(tǒng)流計(jì)算引擎,在全球范圍內(nèi)被公認(rèn)為流計(jì)算的事實(shí)標(biāo)準(zhǔn)。目前,F(xiàn)link社區(qū)在全球的貢獻(xiàn)者已有近2000人。
阿里巴巴是國內(nèi)最早大規(guī)模應(yīng)用Flink技術(shù)的科技公司,并在過去幾年持續(xù)回饋社區(qū),先后貢獻(xiàn)和孵化Blink、Flink CDC、Paimon等優(yōu)秀項(xiàng)目,成為Flink社區(qū)最大的貢獻(xiàn)者,有力推動(dòng)社區(qū)和實(shí)時(shí)計(jì)算技術(shù)的發(fā)展。為了滿足大模型應(yīng)用等新興場(chǎng)景的需求,阿里云從去年開始在開源社區(qū)主導(dǎo)推動(dòng) Flink 2.0 的研發(fā),對(duì) Flink 技術(shù)架構(gòu)進(jìn)行全面升級(jí),包含存算分離、流批融合、湖倉架構(gòu)、AI大模型等技術(shù)方向的眾多創(chuàng)新,這是自 2016 年 Flink 1.0 發(fā)布以來最大規(guī)模的更新,該版本將于 2025年初正式發(fā)布。
大會(huì)現(xiàn)場(chǎng),阿里云還宣布開源下一代流存儲(chǔ) Fluss (Flink Unified Streaming Storage)項(xiàng)目,這是圍繞湖倉架構(gòu)打造的Flink專屬實(shí)時(shí)流存儲(chǔ)底座,可大幅提升 Flink 實(shí)時(shí)流計(jì)算的能力。即日起,全球開發(fā)者可在Github上下載使用。
阿里云開源下一代流存儲(chǔ) Fluss
阿里云開源大數(shù)據(jù)平臺(tái)負(fù)責(zé)人王峰表示:“從使用者,到社區(qū)最大的貢獻(xiàn)者,阿里希望持續(xù)推動(dòng)Flink技術(shù)生態(tài)的繁榮,讓Flink普惠千行百業(yè)企業(yè)。”
據(jù)介紹,F(xiàn)link已廣泛應(yīng)用于互聯(lián)網(wǎng)、電商、在線教育、游戲、金融、制造業(yè)、新能源汽車等行業(yè);2023年,F(xiàn)link憑借其優(yōu)秀的流計(jì)算模型設(shè)計(jì)及其在工業(yè)界和全球范圍內(nèi)的成功應(yīng)用,榮獲SIGMOD Systems Award大獎(jiǎng)。
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )