Advertisement

Spark Streaming中的DStream转换

阅读量:

Spark Streaming之:三、DStream转换


文章目录

  • Spark Streaming之:三、DStream转换
    • 1. DStream转换
    • 2. DStream转换操作状态

—>Spark知识点总结导航<—


1. DStream转换

a. 是Spark streaming数据的表现形式

DStream的核心操作主要分为Transform操作(转换)和Output操作(输出)两大类。值得注意的是,在Transform操作中有一些特定的Original Operations(原语),例如updateStateByKey()、transform()等函数以及与Window相关的各种Transform操作。

c. DStream的转换操作

在这里插入图片描述

2. DStream转换操作状态

DStream 的转化操作可以分为无状态(stateless)和有状态(stateful)两种。

基于无状态转换的操作中进行数据处理时

全部评论 (0)

还没有任何评论哟~