开始爬虫boss直聘时一直访问失败，发现是没有加入cookie数据造成的，加入cookie之后爬取4条数据便又失效了，随后通过selenium自动控制浏览器绕过Boss直聘网站的反爬虫，爬取数据后保存至mongodb。
评论