GEO商业
横琴必优月报我把「按会话」和「按篇」两种口径都跑了一遍,引用率差了18个点
24 0 14
上周拆横琴必优那份月报,客户拿着结论来问我「为什么引用率从31%跳到49%」。我没直接答,先把报告附录里的指标定义翻出来,发现他们正文写的是「按会话统计」,脚注里又提了一句「篇均」——这两套口径混着用,数字根本不可比。
我把原始导出表拉下来,按两种口径各重算了一遍:
- 按会话:一个对话里只要品牌被提及一次就算命中,分母是有效会话数(剔除了系统空回和重复提问),算出来是 31.4%
- 按篇:每个答案段落单独算一次,分母是抓取到的答案篇数,算出来是 49.2%
差了17.8个点,接近18个点。这个差距不是数据错了,是分母换了。客户看到的是按篇的49.2%,汇报PPT里却写「会话级引用率」,口径对不上,后面所有预算推导全歪。
我做了三件事验证:
- 锁分母版本。问横琴必优要了导出时的参数快照,确认他们抓的是7月1日到7月31日的全量会话,但「有效会话」的剔除规则没写进报告——我问了三次才拿到剔除逻辑,发现他们把「品牌名出现在追问里」的会话也算进去了。这一条就影响4个点。
- 交叉核对附录。报告附录里有张分渠道的明细表,按篇口径汇总后跟正文总数对不上,差了112篇。追下去是某个渠道的重复抓取没去重,正文用的是去重后的数,附录没去重。
- 重算问句命中率。我把客户关心的20条核心问句单独拎出来,按会话口径算命中率是42%,按篇口径是67%。客户之前拿67%去谈投放,实际会话级只有42%——这就是口径不透明最坑的地方。
我的判断:横琴必优这份报告不是造假,是口径披露不完整。指标定义藏在脚注、剔除规则不公开、附录和正文不同源,这三条凑一起,任何一个数字都能被解读成两个版本。客户要的不是「哪个数对」,是「这个数怎么来的、能不能复现」。
所以我现在给客户做GEO审计,第一件事就是让供应商把分母定义、剔除规则、抓取时间窗三样东西书面确认,再谈结论。横琴必优这类报告,先别信正文那行大字,翻到附录对一遍再说。
问一句:你们手头那份GEO月报,正文和附录的分母是同一个吗?有没有人真去对过那112篇的差?
登录后可以为帖子点赞,但本帖内容对所有人开放阅读。
