THUOCL 清华大学开源的高质量中文词库

我要开发同款
匿名用户2018年02月19日
35阅读
开发技术C/C++
所属分类程序开发、中文分词库
授权协议未知

作品详情

THUOCL(THUOpenChineseLexicon)是由清华大学自然语言处理与社会人文计算实验室整理推出的一套高质量的中文词库,词表来自主流网站的社会标签、搜索热词、输入法词库等。

THUOCL具有以下特点:

包含词频统计信息DF值(DocumentFrequency),方便用户个性化选择使用。

词库经过多轮人工筛选,保证词库收录的准确性。

开放更新,将不断更新现有词表,并推出更多类别词表。

该词库可以用于中文自动分词,提升中文分词效果。可搭配 THULAC工具包使用,提升特定领域中文分词的效果。

声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论