语料文本中的短语提取方法、装置、存储介质及电子设备.pdfVIP

  • 1
  • 0
  • 约1.96万字
  • 约 17页
  • 2023-05-24 发布于四川
  • 举报

语料文本中的短语提取方法、装置、存储介质及电子设备.pdf

本申请是关于一种语料文本中的短语提取方法、装置、存储介质及电子设备,属于大数据技术领域,该方法包括:对语料文本进行分词,得到组成所述语料文本的多个词语;对所述词语进行词性标注,得到每个所述词语的词性标签;利用所述词性标签,在所述多个词中确定满足预设词性依存规则的词语组合;将所述词语组合输入预先训练好的语言模型,得到所述词语组合对应的成词概率;将大于预定阈值的所述成词概率所对应的词语组合,确定为提取到的第一短语。所述预设词性依存规则可从规则分享区块链中获取。本申请有效提升语料文本中的短语提取可靠性

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 111783450 A (43)申请公布日 2020.10.16 (21)申请号 202010610177.9 (22)申请日 2020.06.29 (71)申请人 中国

文档评论(0)

1亿VIP精品文档

相关文档