离线数仓建设

我要开发同款
肖尼克2022年09月21日
146阅读

作品详情

根据数仓分层理念和现有业务事件,将离线数仓分为了五层:
1、ODS 数据引入层,将原始的结构化数据和结构化后的日志同步存储至MaxCompute。
2、DWD 明细数据层,基于具体业务事件的特点,构建最细粒度的明细数据表,宽表化处理。
3、DWS 汇总数据层,基于上层的应用和产品的指标需求,构建公共粒度的汇总指标事实表。
4、ADS 应用数据层,用于存放数据产品个性化的统计指标数据,输出各种报表。
5、DIM 公共维度层,基于实际业务,通过定义维度,确定维度主键,添加维度属性,关联不同维度等操作,构建整个企业的一致性数据分析维表。
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论