Flink实时数仓实现方案
发布时间
阅读量：
阅读量
先介绍一下集中主流的数仓架构
Lambda函数应用分析
不足之处在于系统中存在离线与实时两种独立的代码架构，这导致在运维及开发过程中所需投入的成本较高。同时，该系统对计算资源的消耗也相对较大。
Kappa系数应用分析
不足之处在于，当业务需求发生调整时，需对原有代码进行重新编写。同时，还需确保消息队列中存储的消息保留一定时长。若启动一个新的任务，从某一特定的历史时间点开始消费消息队列中的数据，直至新任务的消费偏移量与旧任务的消费进度达到一致时，方可停止旧任务。此时，由旧任务生成的结果表即可被删除。
- 实时OLAP变体
还没有任何评论哟~