个人介绍
我是程序员客栈的【不相信长夜将至】,一名大数据软件开发工程师,我毕业于北京外国语大学,担任过中科软的java软件开发工程师,担任过上海软通股份有限公司的大数据开发工程师;负责过淘淘商城项目;数据中台中心项目,用户画像项目,熟练使用vue,springboot,springcloud,oracle,mysql,kafka,saprk,flink,hadoop,hive技术栈,如果我能帮上您的忙,请点击“立即预约”或“发布需求”
工作经历
2018-08-06 -2021-10-27上海软通动力科技股份有限公司大数据开发工程师
该公司主要为银行提供软件开发驻场人才服务,1主要负责通过配置采集器来对数据进行采集,完成对数据的整合,开发业务标签
2016-06-01 -2018-07-01中科软科技股份有限公司软件工程师
该公司主要从事IT方面的服务,提供软件人才给各政府单位,开发甲方的各类软件项目,解决甲方的需求, 参与业务需求评审讨论、项目开发部署、处理日常bug及生产中出现的紧急问题
2012-07-01 -2016-01-06山东潍坊天翔航空技术工程师
该公司主要将B-2直升机组装无人直升机,在地面电子控制无人机的飞行,进行销售以及做航空类飞行器试验,提供飞行数据
教育经历
2018-09-01 - 2022-09-01北京外国语大学计算机科学与技术本科
2009-09-01 - 2012-07-01中国民航大学航空机电专科
技能
该项目平台的主要功能有数据概览、标签广场、人群模块、人群管理、接口服务等,标签管理来致力于各项业务进行数据分析; 主要使用的技术栈:springBoot+CDH6.2 + Hadoop2.7+ Flink1.1 + Kafka2.1 + Hbase2.1 + Phoenix5.2 + MongoDB3.2+ Superset +clickhouse;做项目的过程中对业务的理解至关重要,而且要具有标签意识
该项目通过开发一系列数据工具: 元数据中心、数据指标中心、数仓模型中心、数据资产中心、数据服务中心; 我主要负责数据指标和数仓模型功能的开发; 主要的技术栈CDH6.2 + Flink1.10 + Kafka2.1+ Spark2.4 + Hadoop2.7 + Canal1.1 + MySQL5.7 + Kudu1.9 + Impala3.2 + Hue4.3 + ClickHouse0.2 + ElasticSearch7.6 + Azkaban3.7 做项目的过程中,经常会遇到数据倾斜的问题,hive性能优化的问题,主要通过查找yarn日志,找到性能瓶颈,从而针对性优化;