长城汽车客户画像系统

我要开发同款
爱成绕指柔2023年09月23日
139阅读
所属分类web大数据

作品详情

1.参与架构的设计;
2.负责位置分析、驾驶行为的部分开发;
3.通过sparkstreamming对行程数据进行划分;
4.使用storm程序请求逆地理接口并分区写到hdfs中;
5.通过azkaban调用离线任务,主要为hive和sparksql进行统计并将结果写入elasticsearch和mysql;
6.后期参与维护以及线上资源申请与评估;
7.保障了每天8600万左右数据量的处理,总的车辆数93万左右;
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论