5.3 离线仓—DWS层流量域数据汇总表的设计与实现

离线数仓—DWS层流量域汇总表设计实现

• 引言

  • 在流量域的会话粒度下进行页面浏览行为统计汇总的研究与实现
  • 第一章 近期一日的数据统计汇总报告
    • 第一节 建立数据表格所需的语句设计与实现
      • 第二节 数据导入过程的设计与优化

• 第二节：流量域访客页面按粒度浏览的总览表

  • 第一节点：最近一日的数据统计

    • 第一节点.1：数据建表指令

      • 第一节点.2：数据加载过程

    • 2.最近n日汇总表

    • • 2.1 建表语句
      • 2.2 数据装载

前言

前面完成了交易系统在数据仓库层面的设计与开发, 下安排后续完成流量领域关键表的设计与开发工作

一、流量域会话粒度页面浏览汇总表

1.最近1日汇总表

1.1 建表语句

说明：这里必须要做维度退化操作

    DROP TABLE IF EXISTS dws_traffic_session_page_view_1d;
    CREATE EXTERNAL TABLE dws_traffic_session_page_view_1d
    (
    `session_id`     STRING COMMENT '会话id',
    `mid_id`         st