一种逐句段对比的相似文本查找方法及装置.pdfVIP

  • 0
  • 0
  • 约3.06万字
  • 约 23页
  • 2023-05-28 发布于四川
  • 举报

一种逐句段对比的相似文本查找方法及装置.pdf

本发明涉及数据处理技术领域,涉及一种逐句段对比的相似文本查找方法及装置。其中,该方法包括:对待处理文本以及多个对比文本均进行分段处理,得到对应的多个待处理段落以及每个对比文本的多个对比段落,计算得到所有段落的数字指纹,以数字指纹为基础确定出与待处理段落相同的对比段落,再对剩余的段落通过动态规划算法进行处理,最终得到待处理文本与每个对比文本的相似度,确定出相似度高的对比文本。本发明相较于现有技术中基于计算最小编辑距离和降维比对的方式进行查重,通过上述步骤能够以句段为单位结合数字指纹进行初步处理,再

(19)中华人民共和国国家知识产权局 (12)发明专利 (10)授权公告号 CN 112380833 B (45)授权公告日 2021.05.14 (21)申请号 202011309156.X G06F 16/33 (2019.01) (22)申请日

文档评论(0)

1亿VIP精品文档

相关文档