7篇文章 · 7352字 · 4人关注
-
16.Spark Streaming源码解读之数据清理机制解析
本期内容：一、Spark Streaming 数据清理总览二、****Spark Streaming ****数据清理过程详解三、****Spa...
-
15、Spark Streaming源码解读之No Receivers彻底思考
在前几期文章里讲了带Receiver的Spark Streaming 应用的相关源码解读，但是现在开发Spark Streaming的应用越来越...
-
14：Spark Streaming源码解读之State管理之updateStateByKey和mapWithState解密
首先简单解释一下什么是state(状态)管理？我们以wordcount为例。每个batchInterval会计算当前batch的单词计数，那如果...
-
第12课：Spark Streaming源码解读之Executor容错安全性一、Spark Streaming 数据安全性的考虑： Spark Streaming不断的接收数据，并且不断的产生Job，不断的提交Job给集...
-
11.Spark Streaming源码解读之Driver中的ReceiverTracker架构设计以及具体实现彻底研究上篇文章详细解析了Receiver不断接收数据的过程，在Receiver接收数据的过程中会将数据的元信息发送给ReceiverTracker： ...
-
10.Spark Streaming源码分析:Receiver数据接收全过程详解原创文章，转载请注明作者信息和文章链接 在上一篇中介绍了Receiver的整体架构和设计原理，本篇内容主要介绍Receiver在Executor...
-
9. Spark Streaming技术内幕 : Receiver的精妙实现和生命周期研究和思考原创文章，转载请注明:转载自听风居士博客(http://www.jianshu.com/users/4435a13863fb/timeline)...
文集作者
