Kwaipilot 快手代码大模型研发领域落地实践.docx

Kwaipilot快手代码大模型研发领域落地实践

演讲人：詹子正快手代码大模型算法负责人

什么是Kwaipilot？

5

现有代码模型的问题是什么？

自研？Avg.BLEU2023-10-162023-11-072023-11-292023-12-212024-01-122024-02-05代码依赖复杂模型上下文窗口小推理耗时长模版代码kwaipilotCodeLlama(Meta)通过检索召回、程序分析技术等提升输入context信息密度1.调用流、数据流2.父子类、依赖包3.相似代码、辅助片段一切对人类编程有效的、都是模型需要的LongCont