精通Apache Flink必读系列文章

青旅半醒 2022-01-14 00:59 190阅读 0赞

[2019独角兽企业重金招聘Python工程师标准>>> ][2019_Python_] ![hot3.png][]

Flink是最接近于谷歌Dataflow大数据分析平台的设计的开源分布式计算引擎，其核心设计理念与Spark有很大的不同。

从设计出发点，Flink是一个流计算处理计算引擎，把批处理视为无限流计算的一种特例，Spark是批处理计算引擎，把流处理视为迷你批处理，因为设计上的差异，导致在对处理时延要求高的场景中，Flink更加合适。

从生态上来说，二者都有SQL、机器学习、图计算等基本的组件，但是Spark在丰富程度、成熟度方面比Flink有优势。

关于Flink的资料已经相当多了，笔者就不做画蛇添足写了，要掌握Flink的精妙，必须要了解其底层的基本原理，以下是必读的资料：

理解Flink的设计原则  
Google Stream 101越了批处理的流处理世界

Google Stream 102超越了批处理的流处理世界

Flink原理和实现  
Flink的架构和拓扑概览

理解 Flink 中的计算资源

Flink如何生成ExecutionGraph及物理执行图

Flink 生成StreamGraph

Flink Window的实现原理

Flink中的状态管理

Flink中的反压Back-Pressure

Flink Operator Chain原理

Flink内存管理

Flink异步快照机制-Failover

数据流的类型和操作

Flink Async IO（异步IO）

Flink SQL  
Flink SQL的大部分代码实现是阿里巴巴的Blink团队贡献给Apache的。

Flink SQL 核心功能解密

Flink SQL维表Join和异步优化

Flink SQL 异步IO设计

Flink SQL数据去重的技巧和思考

Flink SQL TOP N的挑战与实现

Flink SQL 流计算“撤回(Retraction)”案例分析

Flink SQL 解决热点问题的大杀器MiniBatch

Flink Table API&SQL的概念和通用API

Flink CEP复杂事件处理  
Flink-CEP论文与源码解读之状态与状态转换

Flink之CEP-API简介

Flink之CEP案例分析-网络攻击检测

Flink-CEP之NFA

Flink-CEP之NFA编译器

Flink-CEP之模式流与运算符

Flink事务  
Flink Streaming Ledger 支持流式处理ACID事务！

Flink源码解析  
Apache Flink源码解析 DataStream API

Flink Exactly Once语义  
flink的两阶段提交协议-实现端到端的Exactly Once语义

Flink案例  
Flink在唯品会的实践

Flink在美团的实践应用

Flink在G7的实践

Flink在饿了么的应用

基于Flink的实时特征平台在Flink的应用

未完待续！

转载于:https://my.oschina.net/u/2935389/blog/3022894

[2019_Python_]: https://my.oschina.net/u/2663968/blog/3061697
[hot3.png]: /images/20220113/28024b3988264af29be80698cfc94e9a.png

发表评论取消回复

表情：

评论列表（有 0 条评论，190人围观）

还没有评论，来说两句吧...

相关阅读

相关 Apache Flink介绍

1、Apache Flink介绍既然有了Apache Spark，为什么还要使用Apache Flink？因为Flink是一个纯流式计算引擎，而类似于Spark这种

忘是亡心i/ 2023年10月17日 22:48/ 0 赞/ 30 阅读

相关 Spring入门到精通：系列文章 - 导读

课程目标本课程专门Sping的核心特性IOC、AOP以及JdbcTemplate、Spring事务管理展开详细的讲解。学习收获 > （1）深入了解

悠悠/ 2022年11月21日 17:31/ 0 赞/ 222 阅读

相关 php必读,新手学习php必读的文章

php是最简单的语言，也是服务器端开发用的最广的语言！很多童鞋会选择它做服务器段开发的语言，希望能够快速掌握，迅速成为一个合格的phper！但很多童鞋刚开始的时候不知道怎么

àì夳堔傛蜴生んèń/ 2022年11月17日 03:58/ 0 赞/ 86 阅读

相关 Java之Spring JdbcTemplate（一篇文章精通系列）

Spring JdbcTemplate基本使用一、Spring JdbcTemplate基本使用 1、JdbcTemplate概述

桃扇骨/ 2022年09月11日 10:12/ 0 赞/ 185 阅读

相关 Java 之 SpringMVC（一篇文章精通系列）

Java 之 SpringMVC（一篇文章精通系列）一、SpringMVC 1、SpringMVC概述 2、Spr

╰半橙微兮°/ 2022年09月11日 07:09/ 0 赞/ 167 阅读

相关 Java之Maven【IDEA版】入门到精通（一篇文章精通系列）

Java之Maven【IDEA版】入门到精通一、Maven简介 1、传统项目管理状态分析 2、Maven是什么

清疚/ 2022年09月11日 03:15/ 0 赞/ 291 阅读

相关 Java之Maven【IDEA版】入门到精通（一篇文章精通系列）

Java之Maven【IDEA版】入门到精通一、Maven简介 1、传统项目管理状态分析 2、Maven是什么

灰太狼/ 2022年08月28日 15:56/ 0 赞/ 209 阅读

相关 Java之Spring JdbcTemplate（一篇文章精通系列）

Spring JdbcTemplate基本使用一、Spring JdbcTemplate基本使用 1、JdbcTemplate概述

r囧r小猫/ 2022年08月28日 14:52/ 0 赞/ 167 阅读

相关精通Apache Flink必读系列文章

Flink是最接近于谷歌Dataflow大数据分析平台的设计的开源分布式计算引擎，其核心设计理念与Spark有很大的不同。从设计出发点，Flink是一个流计算处理计算引擎，

以你之姓@/ 2022年04月10日 09:39/ 0 赞/ 165 阅读

相关精通Apache Flink必读系列文章

[2019独角兽企业重金招聘Python工程师标准>>> ][2019_Python_] ![hot3.png][] Flink是最接近于谷歌Dataflow大数据分析平台的

青旅半醒/ 2022年01月14日 00:59/ 0 赞/ 191 阅读