从事大数据相关开发7年经验,熟练使用Java语言,springboot微服务,大数据相关开发,大数据集群基础环境搭建维护,对数据库 mysql redis hbase clickhouse 等数据库比较熟练,熟练开发flink spark相关实时程序,数仓建模相关比较了解,日常开发中熟练使用kafka消息中间件。参与开发的多个大数据服务成功上线,并稳定运行
安装部署CM集群并通过CM安装大数据相关组件,日常数据维护,hdfs文件合并,集群参数调优,flink任务flume任务维护
0 2023-04-17 10:18
轻量级日志查询系统,继承日志采集,实时处理,日志存储,日志展示查询,独立部署,不依赖第三方组建采集通过阿里开源组件logtail 实时采样flink存储采用CK
0 2023-04-17 10:20
通过实时程序flink计算存储用户标签数据,通过springboot微服务实现web让用户可以选择相关数据标签,对依赖服务提供接口调用,提供下载服务
0 2023-04-17 12:58