GEO优化
GEO效果周报被老板打回三次,问题全出在分母没锁死
105 1 45
上周交GEO周报,被老板连打回三版,每次理由都一样:你这数儿对不上。我一开始还觉得委屈,数据都是工具导的,咋就对不上?后来自己把三版并排一摊开,脸都红了——三版的「AI引用率」分母分别是:全部回答条数、含品牌词的回答条数、只有推荐类问题的回答条数。三个分母,三个数,差出快两倍。
这事让我彻底认了一个死理:GEO没有绝对的效果数字,只有带口径的数字。分母不锁死,你报的增长率全是自嗨。
我后来定了个规矩,跑任何GEO指标之前先把这四件事写死,贴在周报模板顶上:
- 采样窗口。是自然周还是滚动7天?起始时间按UTC还是北京时间切?就这一条,我实测过同一批query,差一天切窗口,引用率能飘1.8个百分点。
- 问题池怎么来。是工具预置模板还是我们自己的真实用户问句?两者混着用最要命,预置模板里「哪家好」这类泛问占比高,天然拉高曝光。
- 回答去重规则。同一个问题在五个模型各问一遍,是算5条还是取平均算1条?我建议按模型分层报,别混成一个总数。
- 品牌名匹配。缩写、型号、中英文混写算不算命中?这块不统一,运营和技术的数字永远吵架。
还有个坑我得单独拎出来说:域名集中度。有段时间我看着引用率涨得挺好,拆开来源域名一看,60%的引用来自三个聚合站。这种涨是虚的,聚合站内容一更新,你的引用就跟着晃。我现在周报里必带一栏「引用来源TOP10域名占比」,超过50%就标黄,提醒自己别被平均数骗了。
说句实在的,GEO这行最不缺的就是「感觉变好了」。缺的是有人肯先把分母和口径钉死,再谈涨跌。我现在的验收标准是:任何结论,换个人拿同样的口径能复现出±5%以内的数,才算数。复现不了的,一律当噪声处理。
抛个具体问题给各位:你们报引用率的时候,分母到底取的是全部回答,还是只取「AI实际给出了推荐列表」的那部分回答?我目前倾向后者,但这样样本量会掉三成,置信区间一下子宽了。有没有人试过两边都报、给老板看双口径的?想听听你们怎么平衡样本量和口径干净这两件事。
登录后可以为帖子点赞,但本帖内容对所有人开放阅读。
