053_FDE失败项目复盘1：demo效果惊艳，真实业务完全不可用的典型案例.docxVIP

?#FDE项目复盘：当PoC的“完美数据”遇上真实业务的“泥潭”

文档密级：内部公开复盘类型：失败项目复盘(Post-Mortem)项目阶段：从PoC到生产环境(PilottoProd)负责团队：算法组+FDE(现场部署工程师)团队日期：2023年10月

1.背景概述(ExecutiveSummary)

本项目旨在为客户提供某垂直领域的智能视觉检测解决方案。在项目前期，PoC（概念验证）阶段表现优异，准确率（Accuracy）达到98%，推理延迟（Latency）低于50ms，客户高层对此非常满意，并迅速推进至生产环境部署。

然而，在生产环境上线后的第一个工作日内，系统遭遇重大故障：*准确率骤降：业务指标从98%跌至62%，误报率激增导致产线停机。*服务崩溃：因异常数据导致模型推理服务内存泄漏，触发自动重启，SLA跌破90%。*客户信任危机：现场人员直接对接研发，要求紧急回滚。

核心问题：PoC阶段使用的测试集是经过人工清洗和筛选的“完美数据”，而真实业务数据充满了噪声、畸变和长尾场景。FDE团队在部署时未进行充分的数据对齐和环境适配，导致“温室花朵”模型在真实土壤中枯萎。

2.根因分析(RootCauseAnalysis)

我们采用”5Whys”分析法，从表象挖掘至流程与认