其他分享
首页 > 其他分享> > HIVE数据仓库分层

HIVE数据仓库分层

作者:互联网

从低往高层:

ODS>DWD,DWS>DM

ODS:Operation Data Store
原始数据,业务库数据,日志数据,mongodb等数据源,api抓取,gio

DWD(数据清洗/DWI) data warehouse detail
数据明细详情,去除空值,脏数据,超过极限范围的
明细解析

DWS(聚合) data warehouse Summary
轻度聚合对DWD

DM-应用层聚合,宽表 Application Data Store
做分析处理同步到RDS数据库里边

标签:DWS,DM,聚合,ODS,数据仓库,HIVE,分层,DWD,Store
来源: https://www.cnblogs.com/lpdeboke/p/14109165.html