个人介绍
1.50W+实时流数据量、50+台集群规模大数据处理解决方案架构设计,实战经验丰富,
百亿数据实时检索平台设计、搭建、开发。
2.精通spark源码内核原理,精通程序调优和解决数据倾斜问题
3.对Spark、Hadoop、Flume、Kafka大数据生态体系比较熟悉,熟悉其内部架构原理,对Spark SQL、Spark Streaming相对熟练,具有实战经验,掌握编程语言:Java、Scala、Python
4.参与某大数据平台百万级数据量架构设计,熟悉DMP平台,对整个大数据流向及架构相对熟悉:
数据源接入层->数据标准化层->数据仓库->调度中心->数据共享中心->数据工厂(三个中心、三个引擎)->
安全中心、监控中心、元数据管理中心、大数据管理平台,主要负责数据工厂一部分
5.具有一定管理经验,沟通协调能力较强,具有“结果导向”思维
6.求知欲较强,喜欢接受挑战,新技术使我兴奋
7.带领团队进行电商平台设计开发,成员人数8人。
8.守时守信,有意向请进一步沟通,谢谢。
工作经历
2018-01-01 -至今深醒大数据开发
1.大数据后端数据支持 2.监控数据处理 3.大数据一体化平台开发 4.数据挖掘 5.高性能架构设计、开发 6.通过监控数据统计实有人口 7.路人库开发及人员监控 8.web、app 后端接口高性能高可用设计开发
2016-06-01 -2018-01-01途家网高级后端工程师
1. DMP平台广告人群标签、人群画像构建 2. 聚合广告相关数据,抽离核心数据,处理之后纳入DMP数据平台 3. DMP平台广告相关数据分析 4. DMP平台站点相关数据分析 5. 历史数据归因分析,分析历史行为频次,决策投放策略 6. 构建IP经纬度库,替代第三方数据等
2014-10-01 -2016-06-01智联招聘高级后端工程师
1.某传统企业电商平台实时数据分析 2.Saas管理平台在线日志分析,推送系统设计及开发 3.Saas平台大数据化:运营管理一体化方案设计风控规则引擎
教育经历
2011-09-01 - 2015-07-01信阳师范学院计算机科学与技术本科
1.河南省三号学生 2.学生党员 3.社联部长,带领七个社团和一个志愿者协会 4.优秀志愿者 5.中国扶贫基金会爱心包裹行动地方组织者 6.河南省创业策划三等奖