采集组石家庄
全职 · 500/日 · 10875/月信用正常
工作时间: 工作日09:00-18:00、周末09:00-18:00工作地点:
远程
服务企业:
10家累计提交:
3工时
联系方式:
********
********
********
查看联系方式
聊一聊个人介绍
我是程序员客栈的粉红的狐狸,一名后端工程师
我毕业于河北科技大学,担任过云房数据的爬虫工程师和大然航空的爬虫工程师
负责公司的数据采集,反反爬研发。
熟练使用django、node、vue、scrapy、selenium、appium、Mongo、Mysql
工作经历
2019-03-19 -至今北京大然航空服务有限公司爬虫工程师
1.采集国外航空公司售票网站、税价、仓位、行李等数据 2. 编写自动买票脚本 3. 解决反爬逻辑 4. 维护爬虫框架 5. 编写验票脚本
2016-04-03 -2019-03-11云房数据采集组
1. 通用爬虫服务设计以及开发 2. 爬虫集群维护 3. 日常 js 逆向,APP 逆向,小程序逆向,接口分析,协议分析,验证码处理 4. 日常数据清洗,匹配,入库 5. hadoop 集群及数据库维护 6. 爬虫集群日志监控,以及集群维护 7. 解决最新反扒措施
教育经历
2012-09-04 - 2016-07-01河北科技大学计算机科学与技术本科
技能
0
1
2
3
4
5
0
1
2
3
4
5