从上下文到长期记忆:大模型记忆工程 的架构设计与实践.pptx

从上下文到长期记忆:大模型记忆工程 的架构设计与实践.pptx

从上下文到长期记忆:大模型记忆工程

的架构设计与实践

李志宇

记忆张量(上海)科技有限公司联合创始人兼CTO

大模型性能缩放曲线的演进历史

2025-2027

Model

Performance

Past-2023

预训练Scaling

DeepSeek-R1

GPT-O1

Qwen2/3

下一个增长曲线?

在实践中学习

后训练Scaling

Pre-trainingPost-trainingMem-training

Qwen1.0

GPT3.5/4.0

2024-2025

从实践层面看记忆增强的必要性

文档评论(0)

1亿VIP精品文档

相关文档