对于爱企查网站,部分信息是公开的,但是作为百度旗下的子产品,爱企查网站拥有百度安全验证、封禁IP等人机识别算法,批量爬取的情况下,极容易被封IP。对于封禁IP设置,可设置代理IP来访问网站,百度安全验证暂时无法绕过,解决方法为修改selenium浏览器头信息,降低百度安全验证的识别效率。
评论