度小满金融大模型技术创新与应用探索.pptx

DataFunCon#20;目录从通用大模型到金融大模型金;从通用大模型到金融大模型;重塑行业格局创造价值增量提升决;但通用模型难胜任金融任务，大模;通过金融领域的定向优化，十亿参;定位最好的金融行业大模型，金融;以轩辕70B为代表，轩辕大模型;通识基础通识是领域认知的前提在;金融大模型训练技术创新金融增强;增量预训练指令微调强化对齐为大;设计一套通用的数据清洗流水线文;中文大模型需首先考虑词表构建问;仅更新模型的词表特征及解码线性;英文数据中文数据金融数据1:3;数据生成数据构造金;指令遵循泛化能力多轮对话通用能;金融大模型训练技术创新金融增强;部分表达方式非中式思维部分常识;对齐后对齐后对齐后大麻是一种什;金融大模型训练技术创新金融增强;输出结果可靠性增强弥补大模型;金融大模型训练技术创新金融增强;设备内存增长模型规模增;010005001500350;128640256全局训练吞吐;金融大模型评测方法创新;数据阶段清洗质量国内大模型发布;预训练阶段强化学习阶段指令微调;LOSSPPL多维度自动评测集;检验微调阶段的对话能力水平，需;强化学习是大模型实现效果突破的;数据阶段清洗质量预训练阶段知识;FinanceIQ金融大模型评;金融大模型应用实践创新;理解|生成|逻辑|;借8万吧，借个四、五个月，;营销服务一体化智能客服服务成;这个新客户非常重要，项目可以承;代码采纳率超40%，体感研发效;多层次、全方位的能力辅助通用能;实时风险控制 主动风险控制传统;总结：金融大模型迭代路径;金融大模型迭代路径：知识和能力;轩辕-千亿轩辕-70B轩辕-7;THANKS