个人介绍
工作12余年,5年的 java 应用开发,8年多的数据平台开发,曾参与和主导过两个 PB 级项目落地,能够从0到1搭建起一个企业级的数据平台,拥有丰富的数据平台建设、数据架构设计和海量数据存储管理经验,对当下主流的大数据技术:Ceph、K8s、 Flink、Spark、ClickHouse、Hive、HBase、Kafka、NebulaGraph、Netty 等都能够熟练使用且有一定的优化经验。
工作经历
2023-02-01 -至今上海飞旗网络技术股份有限公司数据架构师
1、负责数据平台4个子系统的需求调研、分析,及相关用户需求说明书、需求规格说明书、概要设计说明书、详细设计说明书等文档的编写 2、 负责基于 Ceph 的湖仓一体数据架构设计及落地实现,结合K8s容器化技术,为公司节省了30%以上的硬件资源成本 3、 负责从0到1的数据平台建设 4、 引入 CI/CD 自动化开发流程,使团队开发效率得到了明显提高,代码质量得到可靠保障
2021-09-01 -2023-02-01北京中睿天下信息技术有限公司数据架构师
1. 负责安全中台的建设,包括设计方案、技术架构设计,应用架构设计等。 2. 负责异构多源数据采集、存储、计算、分析等场景的架构设计和开发。 3. 负责流式数据的实时传递、清洗、转换和计算(实时统计、分析等)的设计和开发。 4. 负责数据中台,实时计算平台,分布式作业调度平台,数据质量中心等平台的开发。
2019-04-01 -2021-08-01北京中兵数字科技集团有限公司数据开发
● 参与民航局、首都机场、湖南中小机场、长沙黄花机场数据中心的建设 ● 负责数据仓库的规划、设计和开发工作,包括技术选型、集群规划、数据存储、数据架构设计、数据建模等。 ● 负责 FlightRadar24 全球航迹数据服务平台设计和开发,包括数据存储的规划和技术选型、数据服务的设计和开发(负载均衡、鉴权、加解密、限流、服 务发现及调用等
2016-09-01 -2019-03-01创业慧康科技股份有限公司高级后端工程师
● 参与区域医疗云健康平台的建设 ● 负责数据集成平台、数据服务平台的设计和开发,包括数据存储技术的选型、集群规划、ETL 、数据治理等 ● 参与数据仓库的模型设计、数据架构设计和开发工作
教育经历
2008-09-01 - 2011-07-15漯河职业技术学院计算机科学与技术专科