原创力文档- 1、本文档共34页，可阅读全部内容。
- 2、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。
- 3、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
查看更多
AGI时代统一数据目录的设
计与实践
演讲人：邵赛赛演讲人：周康
AboutUS
邵赛赛周康
➢Datastrato联合创始人及CTO➢小米数据开发平台负责人
➢ApacheGravitino创始人➢ApacheGravitinoPPMC
➢ApacheSparkcommitterPMCmember
➢ApacheMember
目录
01AGI时代的数据需求02现有技术的挑战
AGI时代的统一元小米在Gravitino
0304
数据底座上的实践
01
AGI时代的数据需求
LLM开发者的典型工作模式
Experiments
实验的跟踪和可视化
LaunchSweeps
打包、运行ML流程作业模型超参优化
Traces编排Evaluations
训练，调优，及生产化监控、调试LLM和提示评估GenAI应用
开发GenAI应用
AutomationRegistry
自动触发流程发布和分享模
型及数据集
ArtifactsDataReports
数据–大模型开发应用的核心（1）
输入数据加工数据集模型向量提示词
数据–大模型开发应用的核心（2）
数据发现数据血缘数据治理权限控制
不同组织之间分享数据集、模型生数据集、模型治理及权限控制
模型、数据集命周期管理
LLMisOnlyasGoodasyourData
Garbagein,garbageout!
https://www.llamaindex.ai/blog/introducing-llamacloud-and-llamaparse-af8cedf9006b
文档评论（0）