陌陌、虎牙、安居客、58、爱优腾等网站app数据抓取

我要开发同款
小蜘蛛2024年04月07日
75阅读
开发技术加密解密、多线程、爬虫python

作品详情

负责针对不同网站以及app,编写爬虫,采集数据并做简单分析。
主要技术:C#、Python、Selenium,Jadx、Frida等反编译工具
项目职责:
1. 负责将分析师提出的需求转化为具体的实现,并提供报表。
2. 针对不同网站,采用不同爬虫策略,编写稳定,可维护的爬虫系统项目。
3. 针对不同网站的反爬措施,研究对应的反反爬策略。
部分项目列举如下:
● 直播类:陌陌、虎牙、斗鱼、yy等直播平台在线人数、订阅量、主播收入主要信息等抓取
● 游戏类:Wow服务器状态,各应用市场app下载量等信息抓取,微信,qq端游戏排行榜
● 生活服务类:安居客二手房抓取,58同城广告业务
● 电商类:网易考拉、严选等平台商品信息以及销售额抓取。
● 视频类:爱奇艺,乐视,搜狐,腾讯,优酷视频播放量抓取
● 微博Mobile&PC广告抓取
● 京东微选小程序端抓取
● Bilibili用户付费用户,视频等信息抓取
● 快手广告抓取。
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论