实现对某大型金融论坛的全部数据爬取，包括帖子、评论以及评论的回复，并将信息自动保存至本地数据库中。实现ip代理的自动更换、全天候自动化监控与更新

网站返回数据加密，且底层代码使用了混淆技术无法直接阅读。我实现了对混淆代码的破解，并解密返回数据，实现自动化爬取

网站在headers与response部分均有加密，且加密方式由网站自定义函数实现。项目实现了对加密模块的剥离，重现请求头加密方法，并解密返回的数据。