2026奇点智能技术大会-马阳-昆仑芯大规模LLM推理优化在文心一言上的实践.pdf

2026奇点智能技术大会-马阳-昆仑芯大规模LLM推理优化在文心一言上的实践.pdf

马阳

昆仑芯推理框架架构师

Part01.行业背景与挑战

Part02.昆仑芯的推理解决方案

Part03.大模型推理优化落地实践

Part04.总结与未来展望

行业背景与挑战

大模型从“参数竞赛”转向“算力效率优化”

总参数量从百亿级--万亿级,激活参数量趋于收敛

工程效率的提升已经超过单纯堆参数的收益

推理部署的核心

您可能关注的文档

文档评论(0)

1亿VIP精品文档

相关文档