阿里、滴滴、顺丰技术专家:大数据处理引擎,为什么Flink独得恩宠?

Apache Flink:一个面向分布式数据可以进行流处理和批量数据处理的开源计算平台。


将批流统一,把批处理作为一种特殊的流处理,只是它的输入数据流被定义为有界的,这就是Flink的特别之处。

 

如果说下一代大数据处理引擎,谁主沉浮?Flink必有一争之力!


那么,为了跟进技术圈大佬的脚步,为了自己的技术人生,学习是不能停止的。


8月26日 13:00-17:30,由Flink China主办,【实时计算,大有可为】深圳站线下主题沙龙将在南山区科发路1号富利臻大厦三层举行!【等不及要报名的麻烦拉到文末】



Flink大法好,但是场主发现,也有技术人苦恼:Storm立大旗,Spark火力足,为什么一个“草根”可以独得恩宠?

 

场主想和大家简单地比较一下几种主流流处理框架,看看Flink凭什么?


Storm:

适合任务量小但速度要求高的应用,流处理框架的延迟性方面优秀,但由于容错恢复或Trident的状态管理会导致整体性能水平的降低。

 

Spark:

能够处理更高的吞吐量。实际覆盖的计算模型不完整,稳定性未解决,需要注意的还有微批处理的局限性,以及它的延迟性问题。

 

Samza:

一般会搭配强大的本地存储,对管理大数据量的状态非常有益。而Kafka是基础架构中的基石,并且Samza只支持at least once语义

 

Flink:

满足绝大多数流处理场景,稳定性可靠性提升,资源消耗也有所降低,容错机制更高效。

  

客观地说,业务需求不同对于框架的需求自然也会不同。但看好Flink则是因为它原生的流处理理念是可以窥见的趋势。毕竟,数据的价值和时间延迟成反比。 


所以,北京、上海、成都站都错过了,这次南山约不约?


 

原生流处理理念的Flink,南山等你!



深圳站出品人: 阿里巴巴高级产品专家陈守元(花名:巴真)

 

分享嘉宾: 阿里巴巴高级技术专家马国维(花名:黎钢);滴滴出行高级研发工程师闵文俊;阿里巴巴高级技术专家,流计算平台负责人邓小勇(花名:静行);顺丰实时计算平台负责人梁志彪

 

 


陈守元(花名:巴真)

阿里巴巴高级产品专家

 

阿里巴巴实时计算团队产品负责人,2010年毕业即加入阿里集团参与淘宝数据平台建设,近10年的大数据从业经验,开源项目Alibaba DataX发起人,当前负责阿里实时计算产品Flink的规划与设计,致力于推动Flink成为下一代大数据处理标准。




马国维(花名:黎钢)

阿里巴巴高级技术专家


2010年加入阿里巴巴,一直专注于实时大数据处理系统的设计与研发。2015开始调研Flink,并对Flink在大规模集群场景下的稳定性和效率进行了大量的改进,在此基础上推出了阿里巴巴新一代实时计算引擎Blink。目前是Blink DAG引擎团队负责人,致力于打造业界一流的分布式DAG计算引擎。




闵文俊

滴滴出行高级研发工程师


2016年毕业于南京理工大学,现任滴滴出行大数据架构部-实时引擎组高级研发工程师。主要负责滴滴Flink引擎的开发与维护,2017年底着手flink CEP的内源版本维护与开发,在滴滴业务场景中取得较好的应用与实践。




邓小勇(花名:静行)

阿里巴巴高级技术专家,流计算平台负责人

 

曾先后在阿里巴巴搜索、实时数据同步、离线数据同步等岗位工作,并从无到有搭建阿里流计算平台,服务阿里集团内部、公共云和专有云等各类客户。




梁志彪

顺丰实时计算平台负责人


大数据平台研发工程师,任职于顺丰科技,负责科技实时数据平台和实时计算平台的研发和建设。



活动流程

14:00-14:10 巴真 出品人开场发言

14:10-14:40 阿里黎钢 《Flink计算引擎简介》

14:40-15:10 滴滴 闵文俊 《FlinkCEP在滴滴内部的应用场景》

15:10-15:30 茶歇

15:30-16:00 阿里静行《基于Flink的实时计算平台》

16:00-16:30 顺丰 梁志彪 《基于Flink的实时计算平台》

16:30-17:00 阿里巴真《Flink: 下一代大数据处理引擎》

17:00-17:30 自由讨论


找不到Flink学习资源?

不了解Flink在企业业务中的落地实践?


阿里、滴滴、顺丰技术专家的倾力分享,志同道合技术人的交流,还怕流下不懂Flink的泪水吗


如何参加


扫码加入Flink China社区钉钉群


点击文末 “阅读原文” 马上报名!

名额有限,先报先得!



养码人专属福利:

评论区留言,24h以内,点赞量前3名

分别获赠【Flink China社区独家定制】双肩包一枚!!


学习Flink,就要Flink China双肩包!



 系列活动 

  • 【北京站】唯快不破!阿里、美团、滴滴、头条技术专家揭秘:Flink的应用与实践

  • 【上海站】限时领取!Flink学习资料包+上海站门票+定制背包,阿里、携程等大厂专家的独家分享!

  • 【成都站】Spark 和 Flink之争,阿里、滴滴等技术大牛揭秘:你的项目该用哪个?


本次活动场地:由“思微”独家赞助

注:以上排名不分先后


  • Flink China

经过Apache Flink官方授权的中文社区,旨在联合国内的Flink大 V,向国内宣传和普及Flink相关的技术,输出技术,博文、译作、资讯等内容,推动国内大数据技术发展的开源社区。


  • 养码场

一个技术人职场社交平台。现有“养码人” 80000+ ,覆盖 JAVA / PHP / iOS / 测试 / 运维等领域。80% 级别在 P6 及以上,含技术总监、CTO 500 余人。在这里,你可以对话大咖、求职内推、同行交流、线下交友,还有满满的技术干货等你来!


阅读原文,和技术大佬约一波~

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,830评论 5 468
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,992评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,875评论 0 331
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,837评论 1 271
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,734评论 5 360
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,091评论 1 277
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,550评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,217评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,368评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,298评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,350评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,027评论 3 315
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,623评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,706评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,940评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,349评论 2 346
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,936评论 2 341

推荐阅读更多精彩内容

  • 大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储...
    Alukar阅读 2,404评论 0 32
  • Apache Flink(下简称Flink)项目是大数据处理领域最近冉冉升起的一颗新星,其不同于其他大数据项目的诸...
    Alukar阅读 27,081评论 1 48
  • 抱抱宝贝,今天的5分钟 各种各样的事情,各种各样的理由,无论再怎么希望获得你的理解,在看到你低着头委屈的那个样子的...
    握着荆条阅读 114评论 0 0
  • 假如你走了 假如你真的走了 假如你不会走 假如你走不了 假如只是假如 走了还是走了 假如没有假如 走了就是走了 走...
    狼神2019阅读 195评论 0 4
  • 风平浪静的你 享受阳光的轻抚 粼粼波光中你把最美的礼物 馈赠给爱你的人们 奔跑的孩子 你用浪花追逐着他们的脚丫 相...
    心一Sue阅读 243评论 3 2