Apache Flink 漫談系列(01) - 序
Who
本人 孫金城,淘寶花名“金竹”,阿里巴巴高級(jí)技術(shù)專(zhuān)家,Apache Flink Committer。目前就職于阿里巴巴計(jì)算平臺(tái)事業(yè)部,自2015年以來(lái)一直投入于基于Apache Flink的新一代大數(shù)據(jù)計(jì)算平臺(tái)Blink的設(shè)計(jì)研發(fā)工作。
What
Apache Flink 漫談系列會(huì)分享什么呢?本系列分享的核心內(nèi)容會(huì)圍繞 Apache Flink的核心特征以及阿里巴巴對(duì)Apache Flink功能的豐富和性能、架構(gòu)的優(yōu)化進(jìn)行深入剖析,從系統(tǒng)架構(gòu)到具體每個(gè)算子的語(yǔ)義都會(huì)向讀者進(jìn)行細(xì)致分享,并且以圖文和具體示例的方式講解具體算子的實(shí)現(xiàn)原理。
Why
1. 閃速成為Apache***項(xiàng)目
Apache Flink是時(shí)代的產(chǎn)物,是當(dāng)前純流式計(jì)算引擎的領(lǐng)頭羊。最初Apache Flink的名字叫Stratosphere,是位于德國(guó)柏林的一所大學(xué)的幾個(gè)博士和研究生發(fā)明的,很短的時(shí)間便于2014年3月份成為Apache Incubator project。
2. 互聯(lián)網(wǎng)巨頭的認(rèn)可
Apache Flink 于2015年在德國(guó)Berlin舉行了***次Flink forward。也是在2015年阿里巴巴的 蔣曉偉 也在帶領(lǐng)團(tuán)隊(duì)研發(fā)基于Apache Flink的新一代計(jì)算引擎Blink。并于2016年的Flink forward上面對(duì)Blink在Alibaba生態(tài)的應(yīng)用進(jìn)行了分享。此后Apache Flink在流計(jì)算領(lǐng)域風(fēng)靡至今,Blink也在2015,2016,2017的阿里巴巴雙十一狂歡節(jié)中創(chuàng)造了很多奇跡,其中 2017年雙11創(chuàng)下了每秒處理4.72億實(shí)時(shí)日志,每秒32.5萬(wàn)筆支付交易的佳績(jī)。
3. 迅速增長(zhǎng)的用戶(hù)群
在阿里巴巴集團(tuán)內(nèi)部基于Apache Flink的新一代計(jì)算平臺(tái)Blink被廣泛應(yīng)用,同時(shí)在阿里云官網(wǎng)對(duì)外開(kāi)放了Blink,目前業(yè)界大量的用戶(hù)對(duì)Apache Flink 抱有濃厚的學(xué)習(xí)興趣。所以本系列專(zhuān)題應(yīng)需而生,目的在于向廣大用戶(hù)和Apache Flink愛(ài)好者深入全面的分析Apache Flink的實(shí)現(xiàn)原理,讓更多的人更好的了解Apache Flink,并能在Apache Flink中得到更大的利好。
When
Apache Flink 漫談系列什么時(shí)候會(huì)完成呢? 我想本系列會(huì)隨著Apache Flink的不斷發(fā)展而一直持續(xù)下去,除非我不再?gòu)氖翧pache Flink的研究,否則我會(huì)盡力定期為大家更新分享。
How
Apache Flink 漫談系列內(nèi)容如何安排? 根據(jù)目前的情況本系列***篇分享是《Apache Flink漫談系列 - 概述》,內(nèi)容會(huì)包含Apache Flink的整體架構(gòu)、運(yùn)行模型、各個(gè)模塊的作用以及模塊之間的關(guān)系。每完成一篇分享會(huì)在快速導(dǎo)航中添加下一篇分享的題目。
# 關(guān)于點(diǎn)贊和評(píng)論
本系列文章難免有很多缺陷和不足,真誠(chéng)希望讀者對(duì)有收獲的篇章給予點(diǎn)贊鼓勵(lì),對(duì)有不足的篇章給予反饋和建議,先行感謝大家!
快速導(dǎo)航
作者孫金城,花名 金竹,目前就職于阿里巴巴,自2015年以來(lái)一直投入于基于Apache Flink的阿里巴巴計(jì)算平臺(tái)Blink的設(shè)計(jì)研發(fā)工作。
【本文為51CTO專(zhuān)欄作者“金竹”原創(chuàng)稿件,轉(zhuǎn)載請(qǐng)聯(lián)系原作者】