Flink2.0將全面擁抱大模型

十幾年前，移動互聯(lián)網(wǎng)時(shí)代應(yīng)用的爆發(fā)對流計(jì)算提出了新的需求，流計(jì)算引擎成為了實(shí)時(shí)數(shù)倉、實(shí)時(shí)推薦、實(shí)時(shí)分析、實(shí)時(shí)大屏、實(shí)時(shí)風(fēng)控等場景的核心技術(shù)之一。2014年，Apache Flink正式誕生，憑借高吞吐量和精準(zhǔn)實(shí)時(shí)數(shù)據(jù)處理的能力，F(xiàn)link迅速超越Storm、Spark Streaming等傳統(tǒng)流計(jì)算引擎，在全球范圍內(nèi)被公認(rèn)為流計(jì)算的事實(shí)標(biāo)準(zhǔn)。目前，F(xiàn)link社區(qū)在全球的貢獻(xiàn)者已有近2000人。

阿里巴巴是國內(nèi)最早大規(guī)模應(yīng)用Flink技術(shù)的科技公司，并在過去幾年持續(xù)回饋社區(qū)，先后貢獻(xiàn)和孵化Blink、Flink CDC、Paimon等優(yōu)秀項(xiàng)目，成為Flink社區(qū)最大的貢獻(xiàn)者，有力推動社區(qū)和實(shí)時(shí)計(jì)算技術(shù)的發(fā)展。為了滿足大模型應(yīng)用等新興場景的需求，阿里云從去年開始在開源社區(qū)主導(dǎo)推動 Flink 2.0 的研發(fā)，對 Flink 技術(shù)架構(gòu)進(jìn)行全面升級，包含存算分離、流批融合、湖倉架構(gòu)、AI大模型等技術(shù)方向的眾多創(chuàng)新，這是自 2016 年 Flink 1.0 發(fā)布以來最大規(guī)模的更新，該版本將于 2025年初正式發(fā)布。

大會現(xiàn)場，阿里云還宣布開源下一代流存儲 Fluss （Flink Unified Streaming Storage）項(xiàng)目，這是圍繞湖倉架構(gòu)打造的Flink專屬實(shí)時(shí)流存儲底座，可大幅提升 Flink 實(shí)時(shí)流計(jì)算的能力。即日起，全球開發(fā)者可在Github上下載使用。

阿里云開源下一代流存儲 Fluss

阿里云開源大數(shù)據(jù)平臺負(fù)責(zé)人王峰表示：“從使用者，到社區(qū)最大的貢獻(xiàn)者，阿里希望持續(xù)推動Flink技術(shù)生態(tài)的繁榮，讓Flink普惠千行百業(yè)企業(yè)?！?/p>

據(jù)介紹，F(xiàn)link已廣泛應(yīng)用于互聯(lián)網(wǎng)、電商、在線教育、游戲、金融、制造業(yè)、新能源汽車等行業(yè)；2023年，F(xiàn)link憑借其優(yōu)秀的流計(jì)算模型設(shè)計(jì)及其在工業(yè)界和全球范圍內(nèi)的成功應(yīng)用，榮獲SIGMOD Systems Award大獎(jiǎng)。

xiesc