爬虫工程师广州
全职 · 700/日 · 15225/月信用正常
工作时间: 工作日19:30-1:30、周末0:00-0:30工作地点:
远程
服务企业:
22家累计提交:
13工时
联系方式:
********
********
********
查看联系方式
聊一聊个人介绍
半年后端开发经验,三年爬虫开发经验,
熟练掌握爬虫开源框架scrapy的使用,对常见的字体反扒、IP封锁、JS加密、滑块验证码反扒技术等都能攻克
熟练掌握web、app抓包
熟练掌握re、xpath、beautifulsoup等页面解析工具
有能力独立开发爬虫管理系统,实时监控数据采集质量
熟悉numpy、pandans等数据处理工具
熟悉机器学习sk-learn库的使用
熟悉ETL工具kettle
熟悉Mysql、Mongo、redies数据库的使用
工作经历
2019-06-01 -至今广东数鼎科技有限公司爬虫工程师
1.爬虫的开发 2.反爬技术的攻克 3.爬虫管理系统的开发 4.ETL流程的开发 目前在开发自己维护的爬虫任务有50+个左右,程度稳定,无出现过重大失误。
2016-04-01 -2019-04-01广东链动科技有限公司爬虫工程师
1.后端开发:负责电商网站注册、登录功能的开发,使用框架是Django 2.爬虫任务需求分析、爬虫程序的开发、爬虫程序的维护,使用框架是scrapy 3.爬虫采集数据的检查、核对、交付
教育经历
2011-09-01 - 2015-06-01广东石油化工学院电子信息科学与技术本科
在校期间表现良好,曾担任班级学习委员,大学生社团联合会网络编辑部成员,文学社技术部部长
技能
0
1
2
3
4
5
0
1
2
3
4
5
用户评价
zosen
不错 期待继续合作