网站大量收购独家精品文档,联系QQ:2885784924

GLake:大模型时代显存+传输管理与优化.docx

GLake:大模型时代显存+传输管理与优化.docx

  1. 1、本文档共43页,其中可免费阅读24页,需付费169金币后方可阅读剩余内容。
  2. 2、本文档内容版权归属内容提供方,所产生的收益全部归内容提供方所有。如果您对本文有版权争议,可选择认领,认领后既往收益都归您。
  3. 3、本文档由用户上传,本站不保证质量和数量令人满意,可能有诸多瑕疵,付费之前,请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形,可联系本站下载客服投诉处理。
  4. 4、文档侵权举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多

GLake:大模型时代显存+传输管理与优化

蚂蚁集团-基础智能-AIInfra

赵军平

2024.5

I提纲

?背景与技术挑战

?显存墙、传输墙

?GLake介绍:显存与传输优化

?训练场景

?推理场景

?其他:混部、serverless

?总结:开源

I自我介绍

?赵军平,蚂蚁异构计算与推理引擎负责人

?CCFHPC和存储专委委员,~200中/美技术专利

?异构加速,虚拟化,K8S,推理优化,文件系统,企业级存储-保护等

?“数据密集型应用系统设计”译者

?2007~2019:EMC、DellEMC,Start-up

您可能关注的文档

文档评论(0)

4A方案 + 关注
实名认证
服务提供商

擅长策划,|商业地产|住房地产|暖场活动|美陈|圈层活动|嘉年华|市集|生活节|文化节|团建拓展|客户答谢会

1亿VIP精品文档

相关文档