和平手游资产建设及表合规治理

我要开发同款
万东方2023年08月21日
139阅读
所属分类资产建设、Hadoop、SQL、数据治理、ETL、数仓建模

作品详情

项目背景:和平游戏各中心累计有库有50个,表累计2万多张。在长时间的开发下,中间层的mid表和ret表越来越多,尤其是个人属性命名的ret和mid表,有重复开发的情况出现。业务口径不明确;使用表困难。
项目目的:1.构建健全的规范数仓;2.资产覆盖率达到70%
具体工作任务:
1.分析历史需求,指标拆解,构建总线矩阵;
2.确定模型架构ODS-DWD(部分)-DWS轻度-DWS汇总(宽表)-ADS层;
3.完善词根库建设,命名规范,质量验证规范,开发规范制定,表上下线规范;
4.六大数据域ETL开发(活跃、玩法、角色社交、付费流水、系统属性、道具);
5.旧表重构逻辑,质量验证,下架空表/无血缘表;
6.用户画像标签和常用提数数据集处理;
7.河图上架资产进行元数据管理,完善资产表(新增字段,生命周期调整);

成果:
1.新建资产库,和平资产表构建60余张,需求使用资产复用率60%;
2.结合后端前端提供完善的元数据服务,快速实现查表用表,统一业务口径;
3.标准的数仓开发全流程规范推广给其他业务;

声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论