AGI时代统一数据目录的设计与实践.pdf

AGI时代统一数据目录的设

计与实践

当前，大模型技术正引领软件开发范式的革新，重塑生产关系。在此激变之中，QCon以“全面进化”作为2024年度主题，旨在携手创新技术引领者，面向5年以上工作经验的技术团队负责人、架构师、工程总监、产品负责人分享实践洞见与深度经验，并同步革新会议组织模式，以此催化企业实现从技术、产品到组织的全方位立体化的转型升级。

演讲人：邵赛赛演讲人：周康

目录

当前，大模型技术正引领软件开发范式的革新，重塑生产关系。在此激变之中，QCon以“全面进化”作为2024年度主题，旨在携手创新技术引领者，面向5年以上工作经验的技术团队负责人、架构师、工程总监、产品负责人分享实践洞见与深度经验，并同步革新会议组织模式，以此催化企业实现从技术、产品到组织的全方位立体化的转型升级。

01AGI时代的数据需求02现有技术的挑战

AGI时代的统一元小米在Gravitino

0304

数据底座上的实践

01

AGI时代的数据需求

当前，大模型技术正引领软件开发范式的革新，重塑生产关系。在此激变之中，QCon以“全面进化”作为2024年度主题，旨在携手创新技术引领者，面向5年以上工作经验的技术团队负责人、架构师、工程总监、产品负责人分享实践洞见与深度经验，并同步革新会议组织模式，以此催化企业实现从技术、产品到组织的全方位立体化的转型升级。

LLM开发者的典型工作模式

Experiments

实验的跟踪和可视化

LaunchSweeps

打包、运行ML流程作业模型超参优化

当前，大模型技术正引领软件开发范式的革新，重塑生产关系。在此激变之中，QCon以“全面进化”作为2024年度主题，旨在携手创新技术引领者，面向5年以上工作经验的技术团队负责人、架构师、工程总监、产品负责人分享实践洞见与深度经验，并同步革新会议组织模式，以此催化企业实现从技术、产品到组织的全方位立体化的转型升级。

Traces编排Evaluations

训练，调优，及生产化监控、调试LLM和提示评估GenAI应用

开发GenAI应用

AutomationRegistry

自动触发流程发布和分享模

型及数据集

ArtifactsDataReports

数据–大模型开发应用的核心（1）

当前，大模型技术正引领软件开