需求，用户输入分类排行榜关键字获取该分类的电影数据，电影名称，演员，评分，评论。 然后把数据存储为本地，网站为动态加载，静态页面无数据打开开发者选项，观察响应的数据进行全局搜索数据，找出控制类型的参数，获取参数，构建参数映射字典，然后正则匹配参数构造好参数后循环参数数据，请求排行榜数据包，走分支判断判断用户输入的数据是否符合类型，在不在类型字典，在的话解析数据，存储为本地json格式，不再提示用户没有输入的类型从新输入，本项目结束

项目比较简单基本的爬虫技术用的是xpath解析，翻页爬取自动跳转详情页面的具体参数。数据存取没设置，可以根据客户需求如，JSON，csv,mysql,mongodb.

抓取网易云音乐的排行榜，并存入指定文件夹，采用了多线程抓取方式，前提是自己电脑性能的说的过去能胜任项目需求，本项目共50首歌曲，单线程下载需要将近40秒，网速电脑配置一般，采用线程池，只用了9秒多。网速不行的话，如果需要抓取的目标网站，服务器不是太好反应慢或有反爬不但不能用多线程线程还要设置睡眠。