Advertisement

Pravega入门指南:分布式流批统一存储系统

阅读量:

Pravega的一个显著优势在于其能够处理流式与批量数据的统一问题,那么Flink又是通过何种方式达成流批处理一体化的呢?

Flink怎么实现流批统一?

三层API架构设计

在这里插入图片描述

通过运用不同层次的抽象概念,可以实现对流处理与批处理统一性的构建

在这里插入图片描述

实现流批统一的关键在于流批共用同一套引擎,这一目标可通过Table API和SQL来达成。

什么是Pravega?

首先我们需要思考,Pravega的引入究竟有何必要性?

作为一种支持流批统一处理的分布式流数据存储架构,其核心功能在于实现对持续数据流的高效管理与存储。

Pravega

该方案的核心目标是构建一种能够实时存储数据流的存储系统。应用程序可将数据持久化地存入Pravega,而Pravega中的Stream支持无限数量的流,并且可以长期持久化保存数据。

通过采用相同的

全部评论 (0)

还没有任何评论哟~