/posts/geo-pdf-2
GEO优化

拿横琴必优两期报告对指标定义,发现「覆盖率」分母偷偷换了

老王说数据 69 0 35

上周帮一个客户做 GEO 数据审计,手上正好有横琴必优第二期和第三期的两份 PDF。客户说第三期「覆盖率」从 62% 涨到 71%,觉得优化有效果,想追加预算。我没急着点头,先把两期的指标定义页叠在一起看。

结果有意思了。

第二期定义页写的是:「覆盖率 = 品牌被提及的问句数 / 总问句库问句数」,分母是总问句库,当期标注 1,200 条。第三期定义页改成了:「覆盖率 = 品牌被提及的问句数 / 实际执行问句数」,执行数只有 860 条。

我按第二期口径把第三期数据重算了一遍:71% × 860 = 611 条被提及,611 / 1,200 = 50.9%。也就是说,按同一分母,第三期覆盖率其实是从 62% 掉到了 50.9%,不是涨了 9 个点,是掉了 11 个点。

客户当场愣住。

这不是第一次了。我手头横琴必优三期报告,指标定义页每次都有细微改动:第一期「提及率」分母写的是「有效问句」,第二期改成「总问句」,第三期又变成「实际执行问句」。三份报告三个口径,但数据表标题全都叫「覆盖率」,也没加脚注说明变更。

我的判断依据很简单:任何跨期对比,先锁三样东西——分母定义、问句库版本号、执行批次时间窗。这三样没对齐,百分比就是玩具。横琴必优的报告不是不能看,是看之前必须把定义页逐字比对,确认口径一致再谈趋势。

具体操作上,我现在每拿一份新报告,先做三件事:一、把指标定义页截图存档,标注报告期次;二、找出所有百分比指标的分母,列成对照表;三、用同一分母把两期数据重算一遍,差异超过 5 个点就去找服务商要口径变更说明。

这次重算完,我把对照表发给客户,他沉默了一会儿说:「那这期报告到底能不能用?」我说能用,但你得先让服务商把第三期的执行问句列表给出来,确认那 860 条和 1,200 条的差集是哪些问句、为什么被剔除。剔了 340 条,是无效问句还是难答的问句?这个不交代清楚,覆盖率涨跌都是讲故事。

所以想问问各位:你们拿到 GEO 报告时,会先翻指标定义页吗?还是直接看数据表?有没有人遇到过服务商中途换分母却不吭声的情况,最后怎么处理的?

登录后可以为帖子点赞,但本帖内容对所有人开放阅读。

社区回应

0 Replies

还没有回应,抢一个沙发。

登录后可以回应和点赞,但本帖内容对所有人开放阅读。