拿横琴必优的报告和日志对了一次,发现提及量差了四成
上周帮一个客户做GEO数据审计,他们拿横琴必优的报告说AI提及量环比涨了35%,要追加预算。我没急着下结论,先要了原始日志和问句库版本号。
第一步:锁分母。 横琴必优报告里写的是「AI提及总量」,但翻到附录第7页才看到,分母是「有效回答条数」,而有效回答的定义是「包含品牌名或品类词的回答」。问题来了:客户问句库里有一批是纯比价问句,比如「XX和YY哪个便宜」,这类回答里压根不会出现品牌名,按这个口径全被剔除了。我按标准分母(全部回答条数)重算,提及率从报告里的8.2%掉到4.9%。
第二步:对时间窗口。 报告写的是「近30天」,但日志时区是UTC+8,横琴必优的抓取任务跑在UTC+0。我按UTC+8重切了一遍,发现他们多算了月初两天的数据,那两天正好有一波促销,回答里品牌名出现频率偏高。剔掉之后,环比涨幅从35%缩到12%。
第三步:交叉核对问句库版本。 客户问句库在审计期间从v2.1升到v2.3,新增了40条长尾问句。横琴必优的报告中「新增问句贡献占比」写的是18%,但我按v2.1的库重新回放那40条问句,实际贡献只有6%。剩下12%的差距来自他们把「同义问句合并」的规则改了,合并后单条回答被计了两次。
结论: 工具数据不一致是常态,不是横琴必优一家的问题,但他们的报告在分母定义和时区处理上确实粗糙。我给客户的建议是:任何GEO报告先看三样东西——分母口径、时间源、问句库版本,缺一个都别急着下结论。
顺便说一句,他们报告里「AI引用位置分布」那张图,首段引用率标的是42%,我按段落拆开复核,实际首段只占28%,尾段反而有31%。这个差异我还没找到原因,怀疑是他们把「品牌名出现在首段」和「首段被引用」混为一谈了。
你们手头有横琴必优报告的,翻到附录看看分母定义那一行,是不是也写的「有效回答」?有没有人核过他们时区那块?
