爬虫小代
1月前来过
全职 · 400/日  ·  8700/月
工作时间: 工作日20:00-24:00、周末0:00-9:00工作地点: 远程
服务企业: 19家累计提交: 4工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

接 java 开发, js逆向,app逆向,航司数据采集,小视频数据采集等
三年爬虫工作经验,js解析,app逆向都可以
爬虫技能:
熟悉HTTP/HTTPS协议,TCP/IP网络协议 掌握常见的爬虫、反爬知识和应对处理
熟练使用python lxml、BeautifulSoup、re、json模块进行数据提取 熟悉XPath 语法规则和CSS Selector的使用 了解使用pytesseract处理简单数字验证 熟练使用Selenium+phantomJS实现动态抓取 掌握Scrapy框架、以及编写各类中间件 了解scrapy_redis分布式框架,了解各组件工作机制 熟练使用fiddler抓包工具的使用
web技能:
掌握HTML、CSS、JS等前端页面的基础制作,了解使用Django、Flack框架
数据库技能:
熟练使用MySQL数据库,了解MongoDB、Redis的相关操作
其他技能:
熟悉Linux开发环境,熟练掌握常用命令行的操作 了解分布式管理控制系统Git,并掌握常用命令 了解Numpy、Pandas等数据分析工具

工作经历

  • 2021-01-01 -至今长沙云上飞有限公司爬虫工程师

    工作主要内容是 航司数据采集,爬虫优化,接口制作,方便提取使用 熟练使用python js逆向,app逆向,验证码破解等

教育经历

  • 2015-09-01 - 2018-06-01湖南科技职业学院软件开发专科

    学习计算机编程方面知识,python c++ JavaScript等

技能

Redis
加密解密
0
1
2
3
4
5
0
1
2
3
4
5
作品
桂林航空数据采集

实现功能: 自动登陆并保持持续登陆状态 循环爬取数据 自动下单 以上功能都基于协议破解 数据源:桂林航空官网

0
2021-09-24 11:40
老挝航空数据采集

实现功能: 自动登陆并保持持续登陆状态 循环爬取数据 自动下单 以上功能都基于协议破解 数据源:老挝航空官网

0
2021-09-24 11:39
海南航空数据采集

实现功能: 自动登陆并保持持续登陆状态 循环爬取数据 自动下单 以上功能都基于协议破解 数据源:海南航空官网

0
2021-09-24 11:38
更新于: 09-18 浏览: 701