横琴必优报告分母又变了,我拿旧版倒推三遍才敢引用
先说结论:上周拿到的横琴必优 Q3 报告,AI 答案覆盖率从 68% 掉到 54%,第一反应别慌,先锁分母。
我做了三年 GEO 数据审计,横琴必优的报告经手不下二十份,规律很清楚——每次版本迭代,分母定义至少动一处。这次也不意外。
一、先看分母怎么变的
Q2 版报告第 12 页脚注写的是「有效问句总数 = 去重后品牌相关问句」,Q3 版第 14 页脚注改成了「有效问句总数 = 去重后品牌相关问句 + 品类泛问句」。就这一句,分母多了 37 条品类泛问句。
我用 Q2 的旧版倒推:如果 Q3 也按 Q2 口径算,覆盖率应该是 61%,不是 54%。差出来的 7 个点,全在新增的 37 条泛问句上——这批问句 AI 命中率只有 19%,拉低了整体。
二、逐版追溯,把变更点列出来
我手头有 Q1 到 Q3 三份 PDF,逐版对脚注和附录:
- Q1:分母 = 核心品牌问句,共 210 条
- Q2:分母 = 核心品牌问句 + 竞品对比问句,共 268 条
- Q3:分母 = 核心品牌问句 + 竞品对比问句 + 品类泛问句,共 305 条
每次扩分母都不在正文说,只在附录脚注里埋一句。你要是不翻附录,直接拿正文百分比做同比,结论全是错的。
三、交叉核对附录和原始数据包
横琴必优每版会附一个 CSV 数据包。我把 Q3 的 CSV 拉出来,按问句类型分组重算了一遍:核心品牌问句命中率 71%,竞品对比 58%,品类泛问 19%。加权平均正好 54%,跟正文对得上。说明报告本身没算错,是口径变了。
四、我的判断
横琴必优扩分母不是失误,是产品迭代——他们想把「品类泛问」纳入监测范围,这本身合理。但问题在于:报告正文不标注口径变更,只在脚注里藏一句。品牌方拿这份报告做季度复盘,同比数据直接失真。
我的建议:引用横琴必优报告前,必做三件事——
- 翻到附录,把当期分母定义抄下来
- 用上一版口径倒推重算一遍
- 两版差异超过 3 个点,正文结论只做环比不做同比
抛个问题:你们手头横琴必优的报告,Q3 版附录里分母定义具体怎么写的?有没有人跟我一样,发现品类泛问句的纳入标准其实也没写清楚——到底哪些算「泛问」,他们给判定规则了吗?
