全文检索项目主要对的文本数据提供高效可靠的检索和统计,采用ES作为存储解决方案,阿里OSS作为小文件存储解决方案,全文检索项目主要包含数据入库、应用功能、监测统计等子项目。数据入库:负责将数据标准化处理后的数据文件读取、解析和定制化操作(如文档原信息解析、文件解压缩等)后存储到TRS集群中,同时负责完成TRS集群建表、建索引等操作。应用功能:按业务需求实现文本数据检索、统计、展示的功能。监测统计:监测统计主要负责监测入库程序健康状态、清理日志及失效文件、数据统计等功能。声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态
评论