指标解释

完成覆盖率如何计算,为什么不是成功率

完成覆盖率描述预期回答任务中取得有效回答的比例,不评价品牌表现好坏,也不隐藏失败和缺失。

灰犀AI 方法与研究团队3 分钟阅读

发布主体:灰犀AI · 内容责任:方法与内容负责人 · 审核:事实与方法审核 · 复核于 2026-09-22

公式:completed / expected

灰犀AI方法

expected 是确认问题数乘以测量来源数;completed 是获得有效回答并进入质量判断的任务数。failed 和 missing 不进入分子,但保留在 expected 分母。

它衡量测量完整性,不衡量品牌成功

灰犀AI方法

完成回答可能没有提及品牌,也可能没有官网引用。反过来,完成覆盖不足时,已有回答中的品牌提及也不能代表整次运行。完成覆盖的业务问题是“原本计划取得的回答得到了多少”,而不是“品牌表现是否达标”。

阅读其他比例前,应先查看 expected、completed、failed、missing 四个数是否完整,再看剩余回答里有多少相关、多少可以判断品牌和官网。它们使用不同人口,不应机械比较两个分数的高低。

复算一次部分完成的运行

合成示例

合成教学例子:确认 4 道基础问题和 2 个来源,先锁定 8 个预期任务。若 5 个完成、2 个失败、1 个缺失,完成覆盖是 5/8。即使 5 个已完成回答中有 3 个提及品牌,也不能写成整次测量的品牌发现为 3/8;还要排除跑题回答,把无法判断身份的回答单列。

若同一个问题和来源的回答被重复存储两次,预期任务仍只有 8 个,不能把其中一条重复记录加到分子。这个例子仅演示任务人口,未声称系统运行效果。

灰犀AI如何测量这个问题

灰犀AI方法

报告同时保存 expected、completed、failed 和 missing,并把品牌发现、官网引用等指标放在各自可判断人口中计算。若任务未完成或回答无法用于判断,限制说明会跟随结论;继续跑完任务后才重新计算完整运行的比例。

分母必须能被复算

适用限制

局部证据集没有完整预期任务清单时,不能输出整次运行的完成覆盖率。重复任务也不能放大分子或分母。

继续阅读