网站内容及指纹采集分析系统

我要开发同款
小嘴抹了蜜2022年12月02日
148阅读

作品详情

项目简介:网站详细爬取和全站爬取,对异常内容分析告警,高级检索查询存储数据,主要组成:配置管理系统、
采集系统、关联 feed 威胁情报、 网站指纹分析系统、违规网站告警系统。
所用到的技术:umijs+react+antdpro+less 技术栈,Bizcharts 可视化库,Cron 表达式。
负责模块:
1、对 URL 扫描模块细分为详细扫描和全站扫描两部分,再对其拼装和加载。
2、扫描任务利用 Progress 组件动态的在不同状态展示百分比进度。
3、后台管理系统的任务、日志、用户、白名单、规则等数据的增删改查、下载、上传,图片的上传、编辑。
4、使用 Bizcharts 绘折线图 LineAdvance。
5、高级检索模块的 name、判断条件、value 匹配组合不同的语法,添加所需规则。
6、对扫描结果数据处理(截图、格式化 DOM、异常行为、统计数据、证书、网站行为、HTTP 资源等)。
7、任务的定时器、时光机、日志模块。
8、项目性能优化,服务器部署和维护。
9、参与产品原型+UI 设计的评审和讨论,分析用户特点,从功能需求、用户友好度、技术实现、后期扩展等
方面进行前端技术选型和实现。
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论