阿里云首次公開展示Flink2.0細(xì)節(jié),將全面擁抱大模型技術(shù)

11月29日,在Flink Forword Asia 2024上,阿里云表示正主導(dǎo)研發(fā)Flink2.0,并首次公開展示其技術(shù)細(xì)節(jié),F(xiàn)link2.0將全面擁抱大模型,同時新增云原生存算分離、流批一體、兼容流式湖倉等特點,是該技術(shù)誕生十年以來最大的升級之一。會上,阿里云還宣布開源下一代流存儲 Fluss 項目,可為Flink 提供實時流存儲底座,進(jìn)一步提升實時流計算的性能。

圖片1.jpg

Flink2.0將全面擁抱大模型

十幾年前,移動互聯(lián)網(wǎng)時代應(yīng)用的爆發(fā)對流計算提出了新的需求,流計算引擎成為了實時數(shù)倉、實時推薦、實時分析、實時大屏、實時風(fēng)控等場景的核心技術(shù)之一。2014年,Apache Flink正式誕生,憑借高吞吐量和精準(zhǔn)實時數(shù)據(jù)處理的能力,F(xiàn)link迅速超越Storm、Spark Streaming等傳統(tǒng)流計算引擎,在全球范圍內(nèi)被公認(rèn)為流計算的事實標(biāo)準(zhǔn)。目前,F(xiàn)link社區(qū)在全球的貢獻(xiàn)者已有近2000人。

阿里巴巴是國內(nèi)最早大規(guī)模應(yīng)用Flink技術(shù)的科技公司,并在過去幾年持續(xù)回饋社區(qū),先后貢獻(xiàn)和孵化Blink、Flink CDC、Paimon等優(yōu)秀項目,成為Flink社區(qū)最大的貢獻(xiàn)者,有力推動社區(qū)和實時計算技術(shù)的發(fā)展。為了滿足大模型應(yīng)用等新興場景的需求,阿里云從去年開始在開源社區(qū)主導(dǎo)推動 Flink 2.0 的研發(fā),對 Flink 技術(shù)架構(gòu)進(jìn)行全面升級,包含存算分離、流批融合、湖倉架構(gòu)、AI大模型等技術(shù)方向的眾多創(chuàng)新,這是自 2016 年 Flink 1.0 發(fā)布以來最大規(guī)模的更新,該版本將于 2025年初正式發(fā)布。

大會現(xiàn)場,阿里云還宣布開源下一代流存儲 Fluss (Flink Unified Streaming Storage)項目,這是圍繞湖倉架構(gòu)打造的Flink專屬實時流存儲底座,可大幅提升 Flink 實時流計算的能力。即日起,全球開發(fā)者可在Github上下載使用。

圖片2.jpg

阿里云開源下一代流存儲 Fluss

阿里云開源大數(shù)據(jù)平臺負(fù)責(zé)人王峰表示:“從使用者,到社區(qū)最大的貢獻(xiàn)者,阿里希望持續(xù)推動Flink技術(shù)生態(tài)的繁榮,讓Flink普惠千行百業(yè)企業(yè)?!?/p>

據(jù)介紹,F(xiàn)link已廣泛應(yīng)用于互聯(lián)網(wǎng)、電商、在線教育、游戲、金融、制造業(yè)、新能源汽車等行業(yè);2023年,F(xiàn)link憑借其優(yōu)秀的流計算模型設(shè)計及其在工業(yè)界和全球范圍內(nèi)的成功應(yīng)用,榮獲SIGMOD Systems Award大獎。

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實,并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )

贊助商
2024-11-29
阿里云首次公開展示Flink2.0細(xì)節(jié),將全面擁抱大模型技術(shù)
11月29日,在Flink Forword Asia 2024上,阿里云表示正主導(dǎo)研發(fā)Flink2.0,并首次公開展示其技術(shù)細(xì)節(jié),F(xiàn)link2.0將全面擁抱大模型,同時新增云原生存算分離、流批一體、兼容流式湖倉等特點,是該技術(shù)誕生十年以來最大的升級之一。

長按掃碼 閱讀全文