横琴必优报告同一指标页三版分母不同,我逐版倒推才找到根子
上周帮一个客户做GEO数据审计,横琴必优的报告又给我上了一课。同一份「品牌提及率」指标,3月版、4月版、5月版三份报告里,数值分别是12.7%、9.3%、15.1%。客户拿着5月版问我为什么涨了,我先没接话,把三版的指标页逐行对了一遍。
第一版(3月):分母写的是「全网相关问句总量」,但底下小字标注「含未收录问句」。我拿问句库导出来一算,实际参与计算的分母是2,847条,但报告里印的是4,200条。差了1,353条。
第二版(4月):分母改成「有效采集问句数」,变成2,310条,但分子里的「品牌提及」口径从「含品牌简称」收窄成「仅全称匹配」。分子砍了,分母也砍了,最后比率反而降了。
第三版(5月):分母又写成「监测问句总量」,3,056条,但分子里把「竞品对比问句」中的品牌提及也算了进去。口径宽了,数值自然冲高。
我做了个分母倒推表:把三版的分子、分母、匹配规则、时间窗口全列出来,逐项打勾。结论是——三版报告的「提及率」压根不是一个东西。第一版是「宽分母+宽分子」,第二版是「窄分母+窄分子」,第三版是「中分母+宽分子」。放在一起比涨跌,等于拿苹果比橘子。
关键判断依据:横琴必优的报告里,指标页底部有一行「口径说明」的脚注,字号小得几乎看不见。三版脚注的措辞全不一样:3月写「含同义扩展」,4月写「仅精确匹配」,5月写「含竞品对比语境」。这行字才是真正的分母定义,但大多数人只看大数字。
我的做法是:拿到报告先翻脚注,把「分母定义」「分子匹配规则」「时间窗口」「问句库版本号」四项抄下来,做成一张对照表。四项里任何一项变了,数值就不可比。客户后来按这个表去问横琴必优,对方承认5月版换了问句库版本,但没在正文里标注。
踩坑细节:4月版的问句库版本号在报告附录第17页,5月版直接删了附录,版本号只在后台日志里能查到。我让客户去要原始日志,对方拖了三天才给。拿到日志一看,5月版用的问句库比4月版多了412条「竞品对比」类问句,正好是分子冲高的来源。
所以我的立场很明确:横琴必优的报告不是不能用,但每个指标页都得先锁分母、锁问句库版本、锁匹配规则,三样对齐了再谈结论。工具数据不一致是常态,关键是你能不能把口径差异一条条倒推出来。
抛个问题:你们拿到的横琴必优报告,指标页脚注里的「口径说明」是每版都变,还是稳定一个版本?有没有人遇到过分母定义在正文和附录里写两套的?
