个人介绍
熟练掌握 Hadoop,Zookeeper,Flume,Spark,Flink,Hive,Kafka,Azkaban,Oozie,Kettle,Kylin,Druid,Sqoop,Canal
熟练掌握Spring,熟练运用Spring进行多层体系架构的设计,并能通过Spring管理,Mybatis Struts2 Hibernate 和Springmvc ,SpringBoot Maven进行Web开发
工作经历
2017-03-01 -2021-01-01上海万达信息大数据开发
项目名称:百胜推荐系统数据分析 软件环境:Flink,Kafka,Hive,Zookeeper,Hadoop 开发时间: 2020.7-2021.1 项目描述: 实时数据项目,主要是处理肯德基app的推荐数据的处理和指标分析。主要的操作数据是三种,1是订单数据,2是用户行为数据3是推荐数据。任务模块主要是四块,第一块是看板数据展示,第二块是数据打平处理,第三块是aimenu的相关指标计算如页面停留时长,订单时长,点击率等。第四块是将kafka的不同topic的类型数据导入到hive。开发人数三人。 责任描述:1. 参与项目的原始流程设计,操作的数据字段设计 2. 对接上下游人员明确所需的数据和所生成的指标需求 3. 独立完成大部分的指标分析与数据处理 项目经验: 项目名称:数据司法实时数据分析 软件环境:Canal,Redis,Flink,Kafka,Hbase,Phoenix,Druid,Zookeeper 开发时间: 2019.9-2020.5 项目描述: 实时数据项目行政复议分支,将各区的复议数据进行实时采集,采集后对数据进行分析计算统计,对各区复议案件数,今日各区新
教育经历
2021-09-01 - 东华理工大学电子信息-软件工程硕士
经过全国统考以复试成绩第一被东华理工大学研究生学院的电子信息录取。
2012-09-01 - 2017-01-01上海交大继续教育学院计算机科学与技术本科
网络教育本科学历,计算机专业,在服兵役的时候考的。
2009-09-01 - 2012-06-01绍兴职业技术学院计算机应用技术专科
全日制专科学历,计算机应用技术专业。。。。
技能
项目经验: 项目名称:党建服务系统 软件环境:Spring Hibernate SpringMVC Redis ES Shiro Mysql 开发时间: 2018.3-2018.6 项目描述: 用于上海徐汇区党建服务中心的系统,设备是自动化一体机,便于党员或者民众办理相关党的业务.系统分为前台和后台,前台主要用于用户的使用就是设备的使用,后台主要是工作人员信息的管理和处理.大致重要流程主要是递交入党申请书,组织关系转出。先进行插入身份证进行人脸识别,对比通过后,进行填写个人信息界面,填写的个人信息中部分信息会从身份证直接获取,然后提交个人材料,扫描上传,最后打印凭证。开发周期两个月,开发人员两人。 责任描述:1.根据原框架对党建平台流程进行设计 2.数据库的设计 3.根据客户的需求对流程页面功能进行修改 4.测试维护
项目经验 项目名称:上海行政复议管理系统 软件环境: Spring struts2 Hibernate Mysql 开发时间: 2018.7-2018.10 项目描述:行政复议处的办公系统。司法局复议处案件进行的审批处理, 体流程主要为网上申请,收案登记,复议审查,申诉审查,文书上网,办外领导批示。开发周期三个月,开发人员四人。 责任描述:1.单独负责的模块有申诉审查,文书上网,办外领导批示页面与数据库的设计 2.对网上申请,收案登记,复议审查的部分页面与功能进行设计与修改 3.在项目大体完成后项目上线前半个月独立负责项目,更改BUG与需求变更与项目上线后应对大部分用户出现的问题
项目名称:百胜推荐系统数据分析 软件环境:Flink,Kafka,Hive,Zookeeper,Hadoop 开发时间: 2020.7-2021.1 项目描述: 实时数据项目,主要是处理肯德基app的推荐数据的处理和指标分析。主要的操作数据是三种,1是订单数据,2是用户行为数据3是推荐数据。任务模块主要是四块,第一块是看板数据展示,第二块是数据打平处理,第三块是aimenu的相关指标计算如页面停留时长,订单时长,点击率等。第四块是将kafka的不同topic的类型数据导入到hive。开发人数三人。 责任描述:1. 参与项目的原始流程设计,操作的数据字段设计 2. 对接上下游人员明确所需的数据和所生成的指标需求 3. 独立完成大部分的指标分析与数据处理