AI大模型开发实战 教案 11大模型上线后如何持续进化.docx

课程概览

学时：90分钟（2×45′），多媒体教室

先修：完成“大模型部署与推理”实训，能独立启动HuggingFace推理服务并打印日志。

教学目标

知识：说出自动化评估4大指标（BLEU、ROUGE、METEOR、BERTScore）及适用场景；默写A/B测试5步闭环（目标→分流→指标→检验→决策）；解释“热更新”四件套（版本管理→灰度→配置中心→回滚）。

能力：给一段线上日志，能5分钟内用脚本跑出CTR与停留时间；能基于负面反馈30%触发微调并打包新版本；能配置10%灰度流量且支持一键回滚。

情感：树立“线上无小事”观念——每一次500ms延迟都在消耗