2020年人工智能十大技术进展及2021年十大技术趋势.pptx

2020年人工智能十大技术进展及2021年十大技术趋势.pptx

;;序言;进展1:OpenAI发布全球规模最大的预训练语言模型GPT-3

2020年5月,OpenAI发布了迄今为止全球规模最大的预训练语言模型GPT-3。GPT-3具有1750亿参数,训练所用的数据量达到45TB,训练费用超过1200万美元。对于所有任务,应用GPT-3无需进行任何梯度更新或微调,仅需要与模型文本交互为其指定任务和展示少量演示,即可使其完成任务。GPT-3在许多自然语言处理数据集上均具有出色的性能,包括翻译、问答和文本填空任务,还包括一些需要即时推理或领域适应的任务等,已在很多实际任务上大幅接近人类水平。;

文档评论(0)

1亿VIP精品文档

相关文档