MySQL
Oracle
MongoDB
0
1
2
3
4
5
0
1
2
3
4
5
1月前来过
大数据开发
上海全职 · 1000/日 · 21750/月信用正常
工作时间: 工作日18:00-22:30、周末09:30-21:30工作地点:
远程
服务企业:
0家累计提交:
0工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
我是程序员客栈的【黄勇鹏】，一名【大数据开发工程师】；
我毕业于【南昌理工学院】，担任过【扑扑电子商务有限公司】的【大数据开发工程师】
负责过【扑扑数据采集系统】，【扑扑数据分析系统】开发；
熟练使用 分布式存储海量数据【hadoop】，快速查询数据库【Hbase】，实时采集【flume】，阿里系同步工具【datax】；
如果我能帮上您的忙，请点击“立即预约”或“发布需求”！
工作经历
2020-07-01 -2022-01-03扑扑电子商务有限公司大数据开发
主要做数仓开发、编写数仓开发文档、优化数仓性能。完成领导派发下来的分析需求指标。
教育经历
2017-07-01 - 2021-07-01南昌理工学院电子信息本科
技能
作品
数仓搭建理论：关系型和维度型 数仓工具选型：hive和spark 数仓分层：... 数仓自动调度流程组件：海豚 数仓计算逻辑：sql的编写 数仓的优化，分区和分桶
02023-04-24 00:46
大数据平台模块：使用类似cdh的开源框架，一键式安装部署、配置大数据各个组件，形成平台式的大数据开发中心。 采集模块：在大数据平台下的数据从各个数据源整合到一个地方的模块。 计算模块：完成需求的模块，这里会把提的数据分析需求通过计算模块分析好，给到需要的地方。比如大屏展示。
02023-04-24 00:47
采集模块：将数据采集起来，按照要求存储（海量数据） 计算模块：将数据计算，计算完的放进数据库。或者给需要的部门（海量数据） 自动调度模块：每天自动跑需要的数据。
02023-04-24 00:48
