- 37
- 0
- 约2.64千字
- 约 8页
- 2024-08-21 发布于北京
- 举报
Llama3.1发布,开源大模型王者易主。7月24日报道,美国科技巨头Meta推出迄今为止性能最强大的开源大模型——Llama3.1405B(4050亿参数),同时发布了全新升级的Llama3.170B和8B模型版本;Meta评估了超150个基准数据集的性能,Llama3.1405B在代码生成和评估、数学推理、长上下文处理、工具使用和多语言支持等一系列任务中,可与GPT-4o、Claude3.5Sonnet和GeminiUltra相媲美;在其他场景中,Llama3.1405B进行了与人工评估的比较,其总体表现优于GPT-4o和Claude3.5Sonnet。
开源引领,加速构建META生态。与闭源模型不同,Llama3.1是公开可用的模型,模型的权重可供下载;Llama3.1开源使得更广泛的开发者及社区可以为其应用程序定制模型,并在任何环境中运行,包括本地服务器、云端、笔记本电脑、甚至手机等,同时无需将数据分享给Meta。同时,Meta透露,其更新了许可证,允许开发人员首次使用包括405B参数规模的Llama模型的输出来改进其他模型。
未来预期:转向MOE结构,落地三种商业模式。MoE(混合专家模型)是一种基于Transformer架构的模型,旨在提高模型的计算效率和性能。其基本思想是通过多个“专家”网络(子模型)协同工作,根据输入数据
您可能关注的文档
最近下载
- Q∕GDW 13179.3 -2018 35kV~750kV 直流电源系统采购标准 第3部分:专用技术规范.docx VIP
- 电子厂(电子产品制造企业)安全生产风险分级管控体系方案[全套资料汇编完整版].pdf VIP
- 耳鼻喉科运用PDCA循环提高新生儿听力筛查初筛率品管圈成果汇报.pptx
- Q∕GDW 13181.3-2018 35kv~750kv 变电站 一体化电源系统采购标准 第3部分:专用技术规范.docx VIP
- Q∕GDW 13180.3-2018 35kV~750kV变电站交流电源系统采购标准 第3部分:专用技术规范.docx VIP
- Q∕GDW 13185.2-2018 220kV~750kV 变电站UPS不间断电源采购标准 第2部分:专用技术规范.docx VIP
- 机车司机室照明测量方法.pdf VIP
- Q∕GDW 13179.2 -2018 220kV~750kV 直流电源系统采购标准 第2部分:通用技术规范.docx VIP
- Q∕GDW 13181.2-2018 220kV~750kV 变电站一体化电源系统采购标准 第2部分:通用技术规范.docx VIP
- UEC50LSH-Eco-C2操作使用说明书中文版.pdf VIP
原创力文档

文档评论(0)