千亿级仓库>缓慢变化维度

文章目录

第4章 慢变维度
* 第4章第1节 SCD的概念
* 第4章第2节 SCD问题的解决方案汇总
* 数仓项目：拉链表技术详解
* 商品历史快照分析案例
* 方案一：将每日商品数据存储至数据库仓库
* 方案一的具体实现：MySQL向Hive迁移代码编写
* 方案二的具体实施：基于拉链表的历史快照存储策略设计
* 方案二的具体实现：拉链表结构构建及性能优化方法研究
* 关于拉链表查询操作的技术探讨

4 缓慢变化维

4.1 什么是缓慢变化维（SCD)

1、缓慢变化维简介

• 缓慢变化的维度，简称SCD（Slowly Changing Dimension）
• 某些维度表的数据并非静态
• 随着时间缓缓地改变（这一缓缓指的是相对于事实表而言，在事实表中数据的变化速度比这些维度表快）
• 随着时间的变化而发生改变的维度被称为缓慢变化维
• 将处理这些数据历史演变的问题定义为缓慢变化维问题，并简称SCD问题

例如：通过利用用户的维度信息进行分析与计算，在统计不同出生年份（ Generation X, Millennials 和 Gen Z）的消费金额占比。（80后、90后、Z世代）。在一段时间内，用户可能会对数据进行更新操作：将用户的生日信息更改为