大数据上海
全职 · 1000/日 · 21750/月信用正常
工作时间: 周末8:00-21:00工作地点:
服务企业:
5家累计提交:
4工时
联系方式:
********
********
********
查看联系方式
聊一聊个人介绍
技术能力
1、语言类
(1)熟练掌握Java和Scala语言,够独立参与代码编写
(2)熟悉Linux系统,会搭建hadoop集群并掌握Shell脚本语言,会基本的shell或python编程
2、数据仓库类
(1)熟练掌握Hive,会使用hql语言,会编写UDF函数并对hive进行优化,,曾参与过多次数仓项目
(2)会使用es、redis、mysql、hdfs、hbase等进行数据存储,及其增删改查
(3) 会使用erwin建立模型
3、Spark/Hadoop以及流式处理类
(1)熟练掌握sparkcore、sparksql、sparkstreaming使用,理解RDD,DF、DS、DStream
(2)熟练掌握MapReduce的shffle过程,会利用mr框架进行数据分析
(3)熟练掌握Hdfs、yarn、zookeeper、hbase、sqoop、flume等生态圈软件的使用
(4)熟练掌握Kafka的组件结构,可以解决数据传输的安全性问题
(5)熟练掌握hue的使用,对CDH集群进行监控部署等
4、其他类
(1)会使用svn、postman等小工具
(2)会编写spring boot的api接口服务
1、语言类
(1)熟练掌握Java和Scala语言,够独立参与代码编写
(2)熟悉Linux系统,会搭建hadoop集群并掌握Shell脚本语言,会基本的shell或python编程
2、数据仓库类
(1)熟练掌握Hive,会使用hql语言,会编写UDF函数并对hive进行优化,,曾参与过多次数仓项目
(2)会使用es、redis、mysql、hdfs、hbase等进行数据存储,及其增删改查
(3) 会使用erwin建立模型
3、Spark/Hadoop以及流式处理类
(1)熟练掌握sparkcore、sparksql、sparkstreaming使用,理解RDD,DF、DS、DStream
(2)熟练掌握MapReduce的shffle过程,会利用mr框架进行数据分析
(3)熟练掌握Hdfs、yarn、zookeeper、hbase、sqoop、flume等生态圈软件的使用
(4)熟练掌握Kafka的组件结构,可以解决数据传输的安全性问题
(5)熟练掌握hue的使用,对CDH集群进行监控部署等
4、其他类
(1)会使用svn、postman等小工具
(2)会编写spring boot的api接口服务
工作经历
2019-03-01 -至今中软国际大数据
为华为数据中台onedata ,大数据工程师,对华为产品销售,运行后台产生的数据进行分析,提供给决策者 主要负责数仓的模型建设,数仓分层,hql语句开发,erwin模型建设,lts调度,sqoop脚本编写
2016-06-01 -2019-03-01科大讯飞大数据工程师
在科大讯飞工作两年,从事大数据工程师职位 期间参与了四个项目,自己主要负责两个项目,一个是基于数仓hive的k12教育考试系统
教育经历
2013-09-01 - 2017-07-01安徽建筑大学电子信息工程学院本科
获得英语四级证书,学院奖学金三等奖,绩点拿满
技能
0
1
2
3
4
5
0
1
2
3
4
5
用户评价
13916682018
专业度高
相似推荐 换一批
技术经理
500元/天
南京道群健康管理有限公司
技能:Java,Vue,负载均衡,DNS,jenkins,系统架构,Python
java开发工程师
400元/天
前安徽晶奇网络科技有限公司
技能:Java,SQL Server,Oracle,Vue.js,jQuery,SpringMVC,Mybatis,Spring
高级中间件开发工程师
300元/天
中通服咨询设计研究院有限公司
技能:Java,MySQL,Redis,Oracle,Zookeeper,Dubbo,Spring,SpringMVC,Mybatis,ElasticSearch
开发
500元/天
江苏联沐宏
技能:Java,Spring,SpringMVC,jQuery,HTML5,小程序,MySQL