多轮问答中澄清轮数与完成率观察表.docx

多轮问答中澄清轮数与完成率观察表.docx

智能应用实践手册

场景实施与复核记录·第PAGE1页

多轮问答中澄清轮数与完成率观察表

应用任务画布评测口径与实验设计

适用岗位

工具可辅助

人工复核

会话产品经理

按会话日志标记澄清节点

业务测试员复核每次补问是必要还是重复

1计算与判定

更短对话不一定更好。比较两种澄清设计时,同时观察关键信息是否齐备、用户退出是否发生在等待补问前后。

划定有效会话:纳入目标业务任务并保留未完成样本。

逐轮分类:必要澄清、重复补问与无关追问分开计数。

呈现分布:报完成数、退出数和完成会话的轮数分布,不能只报平均。

2示例计算与记录

演练会话甲多问一次地区但正确进入下一节点;乙没问地区给错流程。将甲记必要澄清,不以轮数较多直接扣质量分。

暂停条件:离线样本没有实际退出信号时不得当作真实退出率。

验收时同时列出完成数、退出数和必要澄清分布,展示一个少问却失败的反例,避免奖励不必要的省略。

记录项目

填写示例

实际记录与依据

会话甲

2次必要澄清、完成

会话乙

缺地区、未完成

复核岗位____日期____决定或待办____

文档评论(0)

1亿VIP精品文档

相关文档