个人介绍
4年大数据开发经验
1. 基于 hadoop、spark 平台架构设计及开发工作,参与大数据平台的框架设计及搭建
2. 对海量数据进行收集、存储、管理,基于 python、Hive、Spark 做离线指标分析,基于 Spark Streaming 流式计算的设计及开发
工作经历
2024-03-07 -2024-11-01上海博彦科技大数据开发
大数据开发工程师 工作职责: 主要负责兴业银行数据代码开发。 1.主要负责投资研究分析系统指标数据的提供 2.基于python 做数据的解析提取离线的开发,hive做中间数据处理和数据提供 3.基于es做页面目录结构展示以及快速搜索输入相关指标数据信息
2021-03-03 -2024-03-03上海思瑞信息科技数据开发
大数据开发工程师 工作职责 1.主要负责工行数据治理平台代码开发。 2.主要负责数据治理相关指标的研发,分析,bi 报表相 关开发 3.基于 hive、sparksql离线数仓的开发 4.基于hbase、Spark Streaming做实时指标分析
2016-06-01 -2021-07-08上海和煦信息科技数据开发
大数据开发工程师 工作职责: 1.基于hadoop、spark平台架构设计及开发工作,参与大数据平台 的框架设计及搭建 2.对海量数据进行收集、存储、管理,基于 Hive、Spark做离线指标分析,基于Spark Streaming、流式计算的设计及开发 3.负责大数据开发中的技术问题解决,新技术的调研
教育经历
2012-06-06 - 2016-07-07淮南师范学院电子信息工程本科已认证
8年大数据开发经验 1. 基于 hadoop、spark 平台架构设计及开发工作,参与大数据平台的框架设计及搭建 2. 对海量数据进行收集、存储、管理,基于 python、Hive、Spark 做离线指标分析,基于 Spark Streaming 流式计算的设计及开发