基于孪生网络和多头注意力机制的语义相似度匹配方法.pdfVIP

  • 5
  • 0
  • 约1.91万字
  • 约 17页
  • 2023-05-24 发布于四川
  • 举报

基于孪生网络和多头注意力机制的语义相似度匹配方法.pdf

基于孪生网络和多头注意力机制的语义相似度匹配方法,属于自然语言处理问答系统领域。本发明提出模型SNMA,它使用双向GRU构建孪生网络分别对两个句子嵌入进行编码,之后对编码信息利用Jaccard距离进行信息聚合;同时,我们利用多头注意力机制将两个句子的信息进行交互,最终将交互信息与孪生网络得到的聚合信息进行融合。本发明我们首次将多头注意力机制用在了语义相似度匹配工作中;在四个中文语义相似度数据集中验证了我们工作的有效性。

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 110781680 A (43)申请公布日 2020.02.11 (21)申请号 20191

文档评论(0)

1亿VIP精品文档

相关文档