接 java 开发, js逆向,app逆向,航司数据采集,小视频数据采集等
三年爬虫工作经验,js解析,app逆向都可以
爬虫技能:
熟悉HTTP/HTTPS协议,TCP/IP网络协议 掌握常见的爬虫、反爬知识和应对处理
熟练使用python lxml、BeautifulSoup、re、json模块进行数据提取 熟悉XPath 语法规则和CSS Selector的使用 了解使用pytesseract处理简单数字验证 熟练使用Selenium+phantomJS实现动态抓取 掌握Scrapy框架、以及编写各类中间件 了解scrapy_redis分布式框架,了解各组件工作机制 熟练使用fiddler抓包工具的使用
web技能:
掌握HTML、CSS、JS等前端页面的基础制作,了解使用Django、Flack框架
数据库技能:
熟练使用MySQL数据库,了解MongoDB、Redis的相关操作
其他技能:
熟悉Linux开发环境,熟练掌握常用命令行的操作 了解分布式管理控制系统Git,并掌握常用命令 了解Numpy、Pandas等数据分析工具
实现功能:
自动登陆并保持持续登陆状态
循环爬取数据
自动下单
以上功能都基于协议破解
数据源:桂林航空官网
0 2021-09-24 11:40
实现功能:
自动登陆并保持持续登陆状态
循环爬取数据
自动下单
以上功能都基于协议破解
数据源:老挝航空官网
0 2021-09-24 11:39
实现功能:
自动登陆并保持持续登陆状态
循环爬取数据
自动下单
以上功能都基于协议破解
数据源:海南航空官网
0 2021-09-24 11:38