一种基于改进BERT的自动文本纠错算法及系统.pdfVIP

  • 21
  • 0
  • 约1.28万字
  • 约 12页
  • 2023-06-01 发布于四川
  • 举报

一种基于改进BERT的自动文本纠错算法及系统.pdf

本申请提出了一种基于改进BERT的自动文本纠错算法及系统,涉及机器学习技术领域。该方法包括:选取PLOME模型作为基线模型,沿用PLOME模型的混合嵌入层和混合掩码策略建立改进模型;改进模型通过字符预测和字音预测进行叠加得到预测的结果,其中,预测结果通过将字符预测概率和字音预测概率进行加权求和并计算最终分布,取最高值对应字符作为最终预测结果。在PLOME模型里融入检错预测模块,其中,检错预测模块根据数据集构建错误位置标签,在嵌入层对训练集中的句子对逐字符进行查表,并转为向量时,增加判断该字符是否

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 116187304 A (43)申请公布日 2023.05.30 (21)申请号 202310458819.1 (22)申请日 2023.04.26 (71)申请人 中国传媒大学 地址 100024

文档评论(0)

1亿VIP精品文档

相关文档