一种语言模型的训练方法和装置.pdfVIP

  • 2
  • 0
  • 约1.78万字
  • 约 13页
  • 2023-07-06 发布于四川
  • 举报
本发明提供了一种语言模型的训练方法和装置,涉及翻译技术领域。语言模型的训练方法包括:从多个平行语料对中选择目标平行语料对,将目标平行语料对中的第一语料作为预训练模型的输入语料,第二语料作为预训练模型的目标语料,对预训练模型进行微调训练,在达到预设的微调结束条件的情况下,将预训练模型作为目标语言模型。由于标准语言和方言的语法和语义知识相同,语言模型在预训练阶段可以使用大量的标准语言语料进行训练,学习标准语言和方言的语法和语义知识,在微调训练阶段由于模型已经学习到标准语言和方言的语法和语义知识,因此

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 113836948 A (43)申请公布日 2021.12.24 (21)申请号 202111061230.5 G06N 3/04 (2006.01)

您可能关注的文档

文档评论(0)

1亿VIP精品文档

相关文档