个人介绍
3年项目实施经验,主导参与了内蒙农信、民生银行、内蒙古银行、内蒙联通的数据仓库、大数据平台、大数据迁移、大数据应用标签开发、1104、反洗钱、报表等相关应用系统项目管理与实施工作。
工作经历
2019-12-01 -至今文思海辉大数据开发工程师
此项目包括基于Gaussdb200数据仓库、基于华为大数据历史数据平台、历史数据查询等项目工作,项目中负责大数据历史平台部分的项目进度整体把控,对磁带库历史数据、入仓源系统和数仓历史数据的指导和脚本开发工作,对大数据平台的数据目录进行规划和Hive数据库的整体设计,包括mpp数据库和大数据平台的数据交互和数据传输流程,大数据平台数据保留策略;以及历史数据平台的数据开发和应用
2018-06-01 -2019-11-01东方国信大数据开发工程师
项目主要是将数据从传统的数据库迁移到大数据平台上,建立hadoop+oracle的架构,数据在hadoop上进行加工,再通过Oracle进行展示和应用;不同平台间的交互进行优化,对hive上数据加工流程进行优化,提高执行效率;由于数据量日益增多,数据来源比较分散,不利于统一管理应用,传统的数据仓库已经不能满足我们对数据的分析工作,所以需要在Hive上搭建数据仓库,一方面是为了减轻传统数仓的压力,另一方面是整合传统数仓的数据,将数据严格分层管理,开发统一的接口层、加工层、应用层,应用层会直接针对用户,将普通表加工为宽表,在应用层开发大量的
2017-06-01 -2018-05-01文思海辉数据开发工程师
项目主要是搭建传统的数据仓库,通过搭建不同的数据层来实现数据的加工,整个过程主要分为T层(数据缓冲层)、O层(贴源层)、C层(共性加工层),对上游的数据进行清洗、通过拉链算法保留数据的原貌,整合层根据银行十大主题对数据进行分类整合,最终提供给下游,以及进行报表开发
教育经历
2013-09-01 - 2017-06-01内蒙古农业大学电子科学与技术本科
对大数据方面有着很大的兴趣,且对银行和电信的业务有一定的了解,对待工作和学习有认真负责的态度, 很强的抗压能力,踏实稳重,乐于沟通,具有良好的团队协作能力,足够的耐心去完成自己的工作