基于Scrapy 的简易搜索系统

我要开发同款
BBplux2021年05月13日
161阅读

作品详情

基于Scrapy的简易搜索系统是一个支持模糊搜索和全文检索的简易搜索系统,系统使用Python脚本语言编写网站爬虫模块,采用Scrapy-Redis作为分布式爬虫框架。将爬取的网站文档进行过滤然后存入Elasticsearch进行索引。使用Spring Boot整合Spring、Spring MVC和Spring Data搭建后端访问Elasticsearch数据库,遵循REST风格编写接口。
主要技术:Spring、Spring MVC、Spring Boot、Spring Data、Elasticsearch、Scrapy、Redis、布隆过滤器
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论