实现功能:1.爬取目标网站数据2.进行数据清洗3.存入Mysql数据库技术点:1.反反爬,携带cookie,使用随机user-agent2.使用selenuim来模拟网页的“下拉加载更多”3.收集后进行数据清洗,以增加准确度
评论