




个人介绍
1.熟悉Hadoop生态集群以及其相关技术、对HBase,Hive,Spark有深入理解。
2.熟悉Java,Shell语言使用,可以熟练使用SpringBoot和SpringCloud相关技术。
3.熟悉离线数仓项目和实时项目的相关技术的使用,如HiveSql,FlinkSql。
4.熟悉 DolphinScheduler使用,前后端项目的打包部署,曾基于此平台做过二次开发。
5.熟悉 Sqoop,Datax, Kettle,Azkaban,DolphinScheduler,ClickHouse 等工具的使用。
6.熟悉前端Vue技术栈,能够独立解决前端相关问题。
7.熟悉大数据平台FusionInsight Manager,CDH的使用。
8.熟悉使用OlAP,MPP数据库的使用,如Clickhouse,Doris,Starrocks
工作经历
2023-07-13 -2025-02-09软通动力信息技术股份有限公司高级后端工程师
1. 负责HBase表结构设计及上游标签写入,保证写入效率和响应效率。 2. 保证HBase集群的稳定性,对HBase标签数据进行监控,保证上游的数据准确性。 3. 负责dsp数据平台开发,独立开发与大数据平台交互部分,保证读取大数据的响应相率。
2021-03-08 -2023-07-03珍岛信息技术(上海)股份有限公司大数据开发工程师
● 可视化建模功能点开发。 ● 高级数据分析功能点开发。 ● 动态clickhouse sql 底层代码拼接。 ● Hive,Mysql,Clickhouse 等自定义sql 解析校验。 ● 组件的二次开发,拓展datax的使用,支持达梦,doris等数据库的使用。
教育经历
2014-09-28 - 2018-06-26五邑大学交通信息工程及控制本科
语言
技能

1.解决业务人员实时计算操作难问题,无需代码化,业务人员只需在页面拖拉拽即可完成相应任务的构建。 2.解决实时离线任务可视化问题,可明确的看到任务的跑批情况,监控任务的正常运行。 3.支持多数据源数据接入,文件上传等 4.后端只要使用Java,Flink,Spark,Hive,HBase等开源大数据技术。
