这两个网站我用的request即可,因为在对页面进行分析的时候,发现很轻松的就找到了隐藏的js文件,阿贾克斯文件,获取url后,再去获取相关的data或者parms参数,两个网站都需要在登录的情况下进行数据的爬取,所以就需要保留当前页面的cookie,全部都加载头文件中,headers,这样即可访问隐藏的数据,再将数据存到mysql当Z中,实现永久存储
评论