0
1
2
3
4
5
0
1
2
3
4
5
1月前来过
高级大数据开发工程师
广州全职 · 800/日 · 17400/月信用正常
工作时间: 工作日20:00-00:00、周末9:00-24:00工作地点:
远程
服务企业:
3家累计提交:
2工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
本人个性自律，热爱探索，熟练掌握Java原理，熟练使用Git代码管理工具，熟练掌握基本爬虫开发技巧，熟悉运用Mysql、MongoDB等数据库，熟练使用Golang、Python语言进行开发工作。熟悉Kafka，Hadoop，Hive，Hbase，Azkaban，Datax，Kylin等开源工具，有大数据开发经验
工作经历
2018-06-25 -至今虎彩印艺股份有限公司高级大数据开发工程师
1.数据处理 2.架构设计 3.人员指导 4.机器学习 5.爬虫
2017-04-01 -2018-04-01广州小蓝车网络科技有限公司数据研发工程师
1.根据对应渠道的账号，使用python进行定时爬取任务，导入数据库； 2.用户行为建模机器无监督学习用户分层； 3.现有业务功能维护，系统架构优化革新； 4.数据中心数据仓库设计构建与实践；5.维护大数据环境和数据ETL
2016-06-18 -2017-02-24广州舜飞信息科技有限公司大数据研发工程师
工作内容： 1.针对不同广告渠道进行业务对接研发 2.现有数据中心数据处理流程优化计划并实践 3.大数据系统功能维护，数据清洗,数据监控
2014-06-16 -2015-03-02湖南格尔智慧科技有限公司Java开发工程师
实习
教育经历
2013-09-01 - 2016-06-16南华大学计算机科学与技术硕士研究生
2014年度最佳研究生
2009-09-01 - 2013-06-18湖南科技大学潇湘学院信息与通信工程本科
计算机二级证书，2011年度学院优秀学生
技能
作品
目的: 从RDBMS中实时抽取数据到kafka,消费topic将数据全部存储到Hbase对应的表中,后续可以在hbase上进行更好的扩展 场景: BI,大数据分析,缓慢变化维数据仓库 技术栈相关: Canal binlog实时捕获 Sql server data tracking实时捕获 Kafka Confluents平台 Hbase数据操作 Kafka topic生产与消费
02018-06-30 21:19
用户评价
新手任务教练
顺利完成新手任务，接单功能开启，祝好运！
