1. 您所在位置：
  2. 网站首页
  3. 文档分类
  4. 计算机
  5. 软件工程

GenAI时代，从容应对数据驱动的AI带来的IO挑战.docx

GenAI时代，从容应对数据驱动的AI带来的IO挑战.docx

    GenAI时代，

    从容应对数据驱动的AI带来的I/O挑战

    演讲人：汤文军

    Alluxio资深架构师

    .

    .AI所带来的的IO挑战

    目录

    目录

    IO挑战的解决思路——Alluxio介绍

    .

    .

    .Alluxio技术架构

    典型应用场景

    04

    0

    LLM性能受算力、数据规模和参数驱动=I/O变得至关重要

    ScalingLaw：大语言模型（LLM）训练的性能受到训练过程中不断增长的token数量、模型检查点(checkpoint)大小的驱动。

    *来源:OpenAI:ScalingLawsforNeuralLangua

    您可能关注的文档

    最近下载

    文档评论（0）

    1亿VIP精品文档

    更多 >

    相关文档

    更多 >