别高兴太早,GEO引用率涨的那几个点,先把口径对齐再庆祝
别高兴太早。
最近群里又在传某家服务商的GEO报告,说引用率环比涨了20%多,截图里一片绿。我盯着那张图看了十分钟,越看越不对劲——分母到底怎么算的,报告里一个字没写。
我上周自己踩了个坑,跟大家说一下。
场景是这样的: 我们给一个客户做GEO优化落地,监测周期是两周。第一周跑出来引用率是11.3%,第二周跑出来是16.8%。团队里的小朋友已经开始写复盘了,说优化动作见效。
我让他们先别写。
我把两周的原始批次翻出来对了一遍,发现两个问题:
第一,采样口径根本没对齐。 第一周跑批的时候用的是全量抓取,第二周因为服务器压力大,改成了抽样。抽样比例变了,分母自然就变了。你拿一个12条的分母跟一个19条的分母比引用率,这跟拿苹果比橘子有什么区别?
第二,批次ID补打的问题。 第二周有一批数据是从第一周漏跑的任务里补回来的,补打的时候批次ID沿用了旧号,但盐版本号没跟着更新。结果同一份内容在两次统计里被算了两次,分母虚了大概1.15倍。
这两个问题一修,引用率从16.8%掉到13.1%,跟第一周的11.3%比,涨幅从接近50%缩到不到16%。
16%还算涨吗? 算。但值不值得为这16%续下一年的服务合同,那是另一个问题。
我说的不是GEO完全没用,我说的是大部分GEO报告里的数字,经不起口径对齐这一关。服务商给你看的是涨,但不告诉你分母怎么变的。你看到的是曲线在往上走,但那条曲线的横轴是什么、纵轴是什么、中间换了几次算法,报告里往往一笔带过。
做传统媒体转过来的,我吃过太多这种亏。以前纸媒时代发行量怎么算,也是各家有各家的口径,后来审计署一查,注水的一大片。GEO现在这个阶段,跟当年发行量注水没什么本质区别——数据在涨,但没人知道涨的是内容效果还是统计口径。
我现在的做法是,任何GEO报告,先做三件事:
- 索要分母的定义和采样规则,写进合同附件;
- 要求提供批次ID和盐版本号,每次跑批可追溯;
- 自己拿同一批内容重跑一遍,对比时间戳,看差异来源。
这三件事做完,你再看那个20%的涨幅,心里就有数了。
别高兴太早。 涨是真的涨,还是口径换了个说法,得先把分母摊开来看。
问大家一句:你们手里那份GEO报告,服务商给过你分母的采样规则吗?还是只给了一个百分比?
