知识库问答检索效果调优与坏例归因手册.docx

知识库问答检索效果调优与坏例归因手册.docx

知识库问答检索效果调优与坏例归因实操手册

(AI工具与办公技能·实测数据与操作步骤为据)

第一章问答质量的四层归因框架

知识库问答答不好,问题可能出在四个层:文档切得不对、检索召回不全、重排没把对的片段排上来、生成阶段没照着片段答。不加归因就改参数,等于蒙着眼调。先用一套标注坏例把每类问题分开计数,才知道该动哪层。先分层归因再调参是效率最高的路子。

某内部问答上线两周收集到218条差回答,逐条归因:切分导致答案被截断占31%、召回缺失(片段没进候选)占27%、重排错位(进了候选但排在第6名以后)占22%、生成没用好片段占14%、其余6%为问题本身无解。这个分布决定了优化预算该往切分与召回

文档评论(0)

1亿VIP精品文档

相关文档