MySQL
Oracle
项目管理
0
1
2
3
4
5
0
1
2
3
4
5
1月前来过
大数据开发工程师
成都全职 · 600/日 · 13050/月信用正常
工作时间: 工作日09:00-18:30工作地点:
远程
服务企业:
1家累计提交:
0工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
对数据分析方面以及互联网技术发展方向有良好的意识，对于Hadoop生态圈的各类常用工具都相对比较熟悉，对大数据开发及分析方面有较强的实践经验，曾与中国联通总部各部门（财务部、市场部、渠道运营中心等）有过实际业务往来，并经常性的交流数据口径，对于其业务和数据的了解比较深刻。对于数据分析挖掘有浓厚的兴趣，有过充分的管理经验，曾带领20人的数据团队为甲方提供驻场服务，并稳定运营团队超过三年，具有优秀的沟通和协作能力，有创新精神，乐于接受挑战，能承受工作压力、责任心强，工作踏实。
工作经历
2019-03-27 -至今中国联通北京总部大数据开发工程师
个人职责： 带领团队对接客户业务，整理需求，提供BI服务 对联通O、B域数据进行钻研，分析，支撑业务 提供数据维护服务，保证7x24小时支撑。 项目描述： 联通的业务知识浩瀚如海，各种分支数不胜数，由此划分的数据 分类更是如同天上的繁星，让人目不暇接，故需要专业的数据分 析、建模、开发人员来与业务人员协作配合，共同提高联通数据 的应用广度、深度，提高信息价值，拓宽发展视野，在未来市场 中抢占先机。 技术要点： 1）使用Oracle等关系型数据库提供数据分析服务 2）应用hdfs分布式集群，利用hive进行离线快速支撑服务 3）使用Excel、Word等办公工具出具阶段性报告、服务支撑 情况及业务发展趋势报表。 4）利用ETL工具进行固定任务流水线化，提高工作效率 5）使用Linux系统与各部门进行数据交互，提高业务广度，拓 宽支撑范围。
2017-08-09 -2018-11-14北京智慧星光有限公司大数据分析师
参与需求分析、技术方案选型以及集群搭建及日常维护 负责数据分析并执行部分ETL工作 具体工作： Nginx集群会收集用户的行为事件（我们以通话记录为例），将数据发送到 Kafka消息队列，后端的Spark Streaming实时服务会从Kafka拉取数据进行消费，将数据读出来并进行实时计算分析，将结果写入Redis，可以实时获取用户的行为数据，同时将原生数据存入HDFS备份，周期性创建Hive分区表，再将原生数据导入Hive数据仓库中，以供离线综合统计分析。
教育经历
2021-09-01 - 北京理工大学计算机科学与技术本科
在校期间正常通过学校各类考试，修满学分后毕业，在校期间有过丰富的社交经验，实践经历丰富。
技能
作品
项目描述： 系统实现合规审计、统计分析、全文检索、告警分析等功能，通过丰富的报表，协助管理者及时获悉全网整体运行态势。对一天、一周、一月的PV、UV、跳出率、重复访问率进行统计分析来反映表明用户品质，以达到及时处理的目的。 个人职责： 1、使用Flume来完成Apache服务器日志收集工作，并自动上传到指定的HDFS系统中存储。 2、负责项目中的MR数据清洗部分，将采集到的数据进行过滤，去除垃圾信息并存入hdfs中，并使用hive对数据进行统计分析存入Mysql中，并存入ES中进行备份。 3、参与日志系统的维护和管理。 技术要点： 使用flume实时收集生成的通话数据 将flume收集的log输入发送到kafka集群 将kafka消费的数据进行MR数据清洗、过滤 将干净的数据录入hive 使用hive抽取通话记录到mysql表中
02023-04-07 04:25
项目描述： 针对公司已上线的稳定运营中的系统，提供实时运维服务，保证出现问题后及时响应并解决。 个人职责： 1）提供服务器运维服务，定时检测集群状态。 2）制作用户操作手册，管理用户操作权限。 3）提供运维技术服务，以老带新，建立运维团队。 技术要点： 1）熟悉Linux的搭建与维护，精通各类操作指令。 2）对于HA较为熟悉，了解业务后，可以通过定制化设置，调配集群资源，提高集群稳定性。
02023-04-07 04:26
项目描述： 联通的业务知识浩瀚如海，各种分支数不胜数，由此划分的数据 分类更是如同天上的繁星，让人目不暇接，故需要专业的数据分 析、建模、开发人员来与业务人员协作配合，共同提高联通数据 的应用广度、深度，提高信息价值，拓宽发展视野，在未来市场 中抢占先机。 个人职责： 1）对接业务负责人，参与口径讨论会议 2）承接各类需求，指导开发人员开发问题 3）管理团队、对接客户，抢占业务资源，规划团队发展路线，优化支撑服务模式，引导团队前进。 技术要点： 1）使用Oracle等关系型数据库提供数据分析服务 2）应用hdfs分布式集群，利用hive进行离线快速支撑服务 3）使用Excel、Word等办公工具出具阶段性报告、服务支撑情况及业务发展趋势报表。 4）利用ETL工具进行固定任务流水线化，提高工作效率 5）使用Linux系统与各部门进行数据交互，提高业务广度，拓宽支撑范围。 6）使用帆软等可视化工具定制展示平台，提供可视化服务
02023-04-07 04:27
