Flink 技术及其应用实践(一)
发布时间
阅读量:
阅读量
Flink技术与应用(初级篇)
起源
Apache Flink是一个开源的数据处理框架。其起源可追溯至名为Stratosphere的研究项目的建立。该系统旨在构建下一代大数据分析引擎。于2010年之前Stratosphere项目分化出Flink前身。
在德语中,“Flink”这个词意指敏捷与机智,在该项目中我们选用了一只松鼠作为彩色标志图腾。不仅因为松鼠具备敏捷与机智的特点这一事实(原因),还由于柏林地区的松鼠拥有独特的红棕色毛发(结果),而我们的Flink项目选用的标志性松鼠形象则拥有一双可爱的小尾巴(补充说明),其颜色设计巧妙地呼应了Apache软件基金会标志的颜色基调(补充说明)。换句话说,在设计上我们模仿的是Apache风格的一只小松鼠形象(总结)。
以下为Apache 官网对Flink的解释:
Apache Flink 主要提供了一种高效处理数据流的方法,并支持处理 无界 和 有界 的数据流类型。它被设计为能够在 各种主流集群平台 上运行,并以 内存级别的计算速度 运行,在 无论多大规模都能高效运行 的情况下完成任务。
无界与有界表明Flink既能管理静态数据集也能处理实时流数据。既然如此,在此之前我们已经提到了这一点。其核心机制在于将批处理(即处理有限的静态数据)视作一种特殊的流式数据处理机
全部评论 (0)
还没有任何评论哟~
