分词处理方法、装置、设备及计算机可读存储介质.pdfVIP

  • 2
  • 0
  • 约2.06万字
  • 约 19页
  • 2023-08-23 发布于四川
  • 举报

分词处理方法、装置、设备及计算机可读存储介质.pdf

本发明提供一种分词处理方法、装置、设备及计算机可读存储介质。本发明的方法,通过从待处理语句的句首开始,对所述待处理语句依次进行多次扫描处理,每次扫描处理对当前的扫描区域进行同步分词处理确定当前的扫描区域的分词结果,直至完成对所述待处理语句全部内容的扫描处理,得到所述待处理语句对应的多个扫描区域的分词结果;对所述多个扫描区域的分词结果进行整合处理,得到所述待处理语句的全句分词结果,根据人在阅读语句时的实现行为定义了扫描区域,对扫描区域内的文本进行同步分词处理得到扫描区域的分词结果,而不是逐个字的分

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 110619122 A (43)申请公布日 2019.12.27 (21)申请号 20191

文档评论(0)

1亿VIP精品文档

相关文档