您好！欢迎访问云南省人工智能重点实验室
论文列表
论 文 作 者： |
王红斌*，张卓，赖华. |
|
论 文 名 称： |
结合对比学习的新闻文本与评论相似度计算 |
|
论文发表刊物： |
小型微型计算机系统（2017） |
|
论文发表时间： |
2022 |
|
卷 号 页 码： |
|
|
论 文 描 述： |
|
|
收 录 情 况： |
|
| 论 文 摘 要： |
|
| 新闻文本与新闻评论相似度计算旨在筛选出与新闻文本相关的评论，而大部分评论以短文本的形式对新闻文本做出评价，因此新闻文本与评论的相似度计算本质上是长文本与短文本的相似度计算。传统长文本处理方法易导致文本信息缺失、文章主题不明确等问题，降低相似度计算的准确率。针对新闻文本与评论的长度差距，结合评论的特点，该文提出了结合对比学习的新闻文本与评论相似度计算方法,该方法通过关键词的提取实现新闻文本压缩同时减少文本的冗余信息:将关键词序列与新闻标题拼接作为新闻文本的表示:然后通过 BERT预训练模型使用对比学习的方法实现文本正负例的构造:最后通过交叉熵和相对熵损失函数对预训练模型进行微调，实现文本的相似度计算。实验表明，该文提出的方法较近几年的长文本处理方法在准确率上提高了 3.6%，并在中文文本相似度计算的公共数据集上也取得了较好的效果。 | |
| 点击此处下载文章内容 | |
