0
1
2
3
4
5
1月前来过
大数据开发工程师
上海全职 · 1200/日 · 26100/月信用正常
工作时间: 周末9:00-21:00工作地点:
远程
服务企业:
0家累计提交:
0工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
大数据Java开发工程师，先后在华为，携程，蚂蚁金服工作过，数熟悉Java 大数据 vue开发，本人热爱技术，开发效率很高，面向结果变编程，18年毕业以来一直从事编码相关工作，动手能力强强，抗压能力强。在大数据处理上，熟悉spark flume hbase clickhous等组件的使用，熟悉hive spark sql，后端开发熟悉springboot,mybatis plus,等框架，前端vue熟悉iview,element,ant-desgin等框架
工作经历
2018-07-01 -至今华为大数据开发工程师
大数据处理系统，使用flume采集清洗日志，使用spark分析和处理相关数据，最后做一套服务系统给业务方查询使用，对数据处理流程链路和服务端开发有深度见解和使用
教育经历
和TA聊聊APP扫码和程序员直接沟通
该用户选择隐藏教育经历信息，如需查看详细信息，可点击右上角“和TA聊一聊”查看
技能
作品
使用 spring boot + springcloud 实现网盘系统，前端采用vue+element-ui, 数据库使用mysql，选用eureka作为服务注册中心，使用zuul作为网关，fegin作为服务间调用，ribbon做负载均衡搭建微服务框架
02023-04-28 12:54
负责日志的自动采集，清洗，可视化等全链路的数据流程开发。首先通过flume组件进行原始日志的清洗，清洗出具体的key value数据格式，存储到Hdfs分布式文件系统中，然后使用spark进行清洗后的数据统计和结构开发，将清洗后的数据写入oracle数据库中，然后使用前端vue进行数据可视化
02023-04-28 12:57
基于数据仓库星型雪花模型进行取数工具开发，支持hive spark clickhouse三种查询引擎，通过在web界面自动拼接sql的方式进行取数，开发采用scala java混合语言开发，使用 springboot mybatis plus mysql,前端使用vue开发框架
02023-04-28 12:58
