1. 使用scrapy-redis分布式系统爬取博客园等网站的数据,存入Mysql以及存入ElasticSearch 。2全文搜索,网页上可实现搜索建议,展示我的搜索记录,搜索词高亮标红,搜索结果底部分页等功能。3. 在Redis中实现的实时三站已爬取数目展示,热门搜索Top-5。
评论