1.使用了requests、pandas、time、bs4等模块实现了网站的爬取和数据处理定时等功能。2.难点主要是IP检测和验证码,建立了IP池和打码平台。3.网站对数据源做了加密处理,去js中寻找到了解密的公式。
评论