基于关键词引导和元学习的BERT文本分类——NLP

我要开发同款
张鹏宇2023年09月13日
175阅读
所属分类相似度计算、文本分类、元学习、BERT、NLP

作品详情

任务:完成特定领域(可持续发展领域)的少样本数据(800+条)的多标签分类和语义相似度计算功能
工作:更改BERT-MLM模型架构为特定关键词遮盖,衔接Meta-BERT框架与BCEloss+Sigmoid作为基于元学习的多标签分类模型,将Pooling层token与Contrastive loss结合作为对比损失计算语义相似度
结果:自建数据集微调基于关键词引导的BERT-MLM模型、多比例数据量微调并验证结合元学习的多标签分类模型、实现基于对比学习的文本相似度计算方法、PyQt5开发前端平台
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论