1. 您所在位置：
  2. 网站首页
  3. 文档分类
  4. 行业资料
  5. 工业设计

混元大模型简介.docx

混元大模型简介.docx

    1. 1、本文档内容版权归属内容提供方，所产生的收益全部归内容提供方所有。如果您对本文有版权争议，可选择认领，认领后既往收益都归您。。
    2. 2、本文档由用户上传，本站不保证质量和数量令人满意，可能有诸多瑕疵，付费之前，请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形，可联系本站下载客服投诉处理。
    3. 3、文档侵权举报电话：400-050-0827(电话支持时间：9:00-18:30)。
    查看更多

    腾讯混元大模型

    全链路自主研发，从零训练自主创新》

    创新大模型训练

    预训练

    从零启动训练

    优化预训练算法及策略

    精调及强化学习

    改进注意力机制开发思维链新算法

    自研机器学习框架

    AngelPTM训练框架

    训练速度是业界主流框架的2.6倍

    AngelHCF推理框架

    推理速度相比业界主流框架提升1.3倍

    领先基础设施

    服务器

    腾讯云星星海自研服务器

    算力平台

    腾讯云高性能算力集群

    性能提升3倍

    高速网络

    自研星脉高速网络

    3.2T通信带宽10倍通信性能提升

    腾讯混元大模型体系从稠密模型架构向稀疏化架构演进)

    稠密模型矩阵提供不同尺寸的选项，覆盖不同场景，提

    您可能关注的文档

    最近下载

    文档评论（0）

    情报猿 + 关注
    实名认证
    内容提供者

    该用户很懒，什么也没介绍

    咨询Ta 进入空间

    1亿VIP精品文档

    更多 >

    相关文档

    更多 >