霆晴1128463801
3天前在线
全职 · 800/日  ·  17400/月
工作时间: 工作日09:00-20:00、周末10:00-17:00工作地点: 远程
服务企业: 0家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

1.熟悉Hadoop生态集群以及其相关技术、对HBase,Hive,Spark有深入理解。

2.熟悉Java,Shell语言使用,可以熟练使用SpringBoot和SpringCloud相关技术。

3.熟悉离线数仓项目和实时项目的相关技术的使用,如HiveSql,FlinkSql。

4.熟悉 DolphinScheduler使用,前后端项目的打包部署,曾基于此平台做过二次开发。

5.熟悉 Sqoop,Datax, Kettle,Azkaban,DolphinScheduler,ClickHouse 等工具的使用。

6.熟悉前端Vue技术栈,能够独立解决前端相关问题。

7.熟悉大数据平台FusionInsight Manager,CDH的使用。

8.熟悉使用OlAP,MPP数据库的使用,如Clickhouse,Doris,Starrocks

工作经历

  • 2023-07-13 -2025-02-09软通动力信息技术股份有限公司高级后端工程师

    1. 负责HBase表结构设计及上游标签写入,保证写入效率和响应效率。 2. 保证HBase集群的稳定性,对HBase标签数据进行监控,保证上游的数据准确性。 3. 负责dsp数据平台开发,独立开发与大数据平台交互部分,保证读取大数据的响应相率。

  • 2021-03-08 -2023-07-03珍岛信息技术(上海)股份有限公司大数据开发工程师

    ● 可视化建模功能点开发。 ● 高级数据分析功能点开发。 ● 动态clickhouse sql 底层代码拼接。 ● Hive,Mysql,Clickhouse 等自定义sql 解析校验。 ● 组件的二次开发,拓展datax的使用,支持达梦,doris等数据库的使用。

教育经历

  • 2014-09-28 - 2018-06-26五邑大学交通信息工程及控制本科

技能

Vue
0
1
2
3
4
5
0
1
2
3
4
5
作品
流批一体数据处理平台

1.解决业务人员实时计算操作难问题,无需代码化,业务人员只需在页面拖拉拽即可完成相应任务的构建。 2.解决实时离线任务可视化问题,可明确的看到任务的跑批情况,监控任务的正常运行。 3.支持多数据源数据接入,文件上传等 4.后端只要使用Java,Flink,Spark,Hive,HBase等开源大数据技术。

0
2025-02-16 15:01
大数据CDP数据客户平台

1.解决数据孤岛,数据碎片化程度过高问题。 2.解决数据质量和准确性难以得到保障问题。 3.解决无法识别与打通来自不同渠道上的同一客户问题。 4.解决来自不同渠道的同一客户难以得到统一的体验问题。 5.解决缺少商业决策、营销策略制定的依据问题。 6.该项目主要使用JAVA 加开源大数据技术如hadoop,hive,spark,flink,hbase,StarRocks等。

0
2025-02-16 15:01
更新于: 3天前 浏览: 10