1.该系统是为了统计工序&过程&实测三个功能模块的业务指标,时间统计维度有日、周、月、季度、年,空间统计维度有项目,公司,集团,统计的结果以折线图的方式展示。2.基于千万级离线数据量背景,使用 Spark 开发业务指标离线统计系统。负责整个统计系统的设计和工序模块的开发任务。统计任务采用 Crontab 定时触发,最终运行在 Spark 集群上。3.技术栈:Spark + MySQL + Crontab + Linux声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态
评论