Spark Streaming中的DStream转换
发布时间
阅读量:
阅读量
Spark Streaming之:三、DStream转换
文章目录
- Spark Streaming之:三、DStream转换
-
- 1. DStream转换
- 2. DStream转换操作状态
1. DStream转换
a. 是Spark streaming数据的表现形式
DStream的核心操作主要分为Transform操作(转换)和Output操作(输出)两大类。值得注意的是,在Transform操作中有一些特定的Original Operations(原语),例如updateStateByKey()、transform()等函数以及与Window相关的各种Transform操作。
c. DStream的转换操作

2. DStream转换操作状态
DStream 的转化操作可以分为无状态(stateless)和有状态(stateful)两种。
基于无状态转换的操作中进行数据处理时
全部评论 (0)
还没有任何评论哟~
