一个针对国家药品监督局的爬虫。由于其用了瑞数公司的反爬产品,因此通过Js Hook插件TamperMonkey,完成浏览器段的用户行为模拟。即对于a、button、div标签的Click行为。再通过简单的js代码读取Dom数据并在浏览器段用WebSocket对本机另一个Python服务器段项目进行全双工连接。Python’项目记录浏览器发来的数据,并保存为csv格式或是进库。并通过WebSocket对浏览器进行通信控制。即告诉浏览器下一步进行哪一种用户行为。声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态
评论