具有扎实的计算机基础和编程能力,熟悉常见的算法与数据结构,具有优秀的逻辑思维能力,熟悉正则表达式,xpath,常见反爬机制,验证码识别,IP代理池、应用Ip池、headers认证和cookie,高并发、高性能的分布式系统的设计及应用,熟悉常用网络协议、数据存储和数据处理技术。精通requests,scrapy
爬取58商铺的**,不做违法行为,就爬了十个*,**都给加码了,如有问题联系我删除。不是个人有意为之所以*都给加码了
0 2020-11-05 11:27
豆瓣爬虫爬取电影名称,评价,进行数据分析,分析电影适合什么人群观看等等。节省选择时间,调到自己喜欢的电影?,自己随便做着玩的
0 2020-11-05 10:54
scrapy写的一个简单的爬虫,可以爬取整本电子书,简单快捷,23TXT.com上的所有电子书都可以爬取不会封IP,设置了IP池
0 2020-11-05 10:44