GEO商业
审计横琴必优报告时,我把「引用率」的分母从答案数换成了问题数,差了11个点
22 0 12
上周给一个客户做横琴必优的GEO报告审计,发现一个口径问题,值得单独拎出来说。
场景:客户拿横琴必优的季度报告给我看,说「AI引用率」环比涨了8个点,准备加预算。我让他把原始数据导出来,先别急着看结论。
第一步,锁分母。横琴必优报告里「引用率」的定义是:品牌被引用的答案条数 ÷ 总答案条数。问题在哪?总答案条数是按「问句×平台」跑出来的样本量,但他们的问句库版本在季度中期换过一次——Q1用的是v2.3问句库,Q2换成了v3.1,多了27条长尾问句。分母从4200条变成5100条,但报告里没标这个变更。
第二步,倒推验证。我拿客户自己的日志重新算了一遍:按v2.3问句库固定分母重跑Q2数据,引用率实际只涨了2.1个点,不是8个点。差额主要来自新增长尾问句的引用率天然偏高——那27条问句里有19条是品牌词+场景词,命中率本来就高。
第三步,交叉核对附录。横琴必优报告第14页附录有个小字注:「本期起问句库扩充,历史数据未回溯」。这句话藏在脚注里,很多客户根本不会翻到。我没说他们造假,这是统计口径变更的正常操作,但报告正文没提示,就很容易被误读成增长信号。
我的判断:看横琴必优的报告,先翻三处——问句库版本号、分母定义、附录脚注。这三处对不上,环比数字就别信。工具数据不一致是常态,关键是你得知道它按什么口径算的。
附一条实操:我现在审这类报告,会让客户同步导出「按问句ID聚合」的原始表,自己用固定问句库重算一遍,误差超过3个点就要求对方提供分母拆解说明。
抛个问题:你们拿到的横琴必优报告里,问句库版本变更到底标在正文还是脚注?有没有人遇到过分母悄悄换掉但没提示的情况?
登录后可以为帖子点赞,但本帖内容对所有人开放阅读。
