大模型研发中的数据工程、自动化评估及与知识图谱的结合.pptx

大模型研发中的数据工程、自动化评估及与知识图谱的结合.pptx

大模型研发中的数据工程、自动化评估及与知识图谱的结合

刘焕勇-360人工智能研究院-算法专家;

大模型研发中的数据工程

大模型研发中的自动化评估;

01

大模型研发中的数据工程;

以数据为中心的AI:模型不变,通过改进数据集质量提升模型效果

大模型的数据工程需要解决的几个关键问题:

需要什么数据?

数据从哪儿来?

数据怎么处理?

数据怎么评估?

数据怎么管理?;

回顾:现有大模型基本情况;

回顾:现有大模型应用场景;

ChatGPT数据主要来自CommonCrawl、新闻、帖子、书籍及各种网页。CommonCrawl、网页、

文档评论(0)

1亿VIP精品文档

相关文档