数仓实战04：数仓搭建-DWD层

た 入场券 2022-11-29 03:17 252阅读 0赞

1）对用户行为数据解析
2）对核心数据进行判空过滤。
3）对业务数据采用维度模型重新建模，即维度退化。

1.用户行为启动表数据解析

1.1创建启动表

1）建表语句

  1. hive (gmall) > DROP TABLE
  2. IF EXISTS dwd_start_log;
  4. CREATE EXTERNAL TABLE dwd_start_log (
  5.     `mid_id` string,
  6.     `user_id` string,
  7.     `version_code` string,
  8.     `version_name` string,
  9.     `lang` string,
  10.     `source` string,
  11.     `os` string,
  12.     `area` string,
  13.     `model` string,
  14.     `brand` string,
  15.     `sdk_version` string,
  16.     `gmail` string,
  17.     `height_width` string,
  18.     `app_time` string,
  19.     `network` string,
  20.     `lng` string,
  21.     `lat` string,
  22.     `entry` string,
  23.     `open_ad_type` string,
  24.     `action` string,
  25.     `loading_time` string,
  26.     `detail` string,
  27.     `extend1` string
  28. ) PARTITIONED BY (dt string) stored AS parquet lo

发表评论

表情：
评论列表 （有 0 条评论，252人围观）

还没有评论，来说两句吧...

相关阅读