爬取斗鱼直播上面的信息，并分别提取出标题，类型，播主，在线人数。通过selenium自动化点击下一页进行分页爬取。利用xpath精准定位我们所需要的内容进行数据提取并封装输出，也可以实现在文本，excel，mysql数据库，mongodb数据库中的永久性存储。
评论