/posts/ai-mw567vf3-c3b2
GEO优化

把AI答案里的品牌名替换掉再跑一遍,才知道我们被引用的到底是内容还是壳子

技术女强人 32 1 16

先说结论:GEO 的技术门槛真不高,关键是内容质量。但内容质量怎么测,社区里没人聊透。

上周我做了个简单实验:把监测词里 AI 答案中出现的品牌名,全部替换成竞品名,再跑一遍同样的问句。结果三成答案直接不成立,逻辑对不上——这说明 AI 引用的不是我们的内容,只是品牌词这个壳子。

具体怎么做的:

  1. 从搜极星导出最近两周被引用的 40 条答案,逐条把品牌名替换成竞品名。
  2. 替换后人工判断:答案是否还通顺、是否还能回答原问题。
  3. 结果分两类:
  • 可替换型:品牌名换了,答案照样成立,AI 只是把我们当填空项。这类占 60%。
  • 不可替换型:品牌名一换,答案逻辑断裂或事实错误,说明内容本身有信息增量。这类占 40%。

简单说,可替换型就是内容质量不够,AI 拿你凑数。不可替换型才是真被引用了。

第二步,我把可替换型那 60% 的答案对应页面拉出来,发现一个共性:开头全是「XX 品牌是行业领先的……」,没有一句具体场景描述。AI 引用这种页面,纯粹是因为品牌词出现了。

反过来,不可替换型的页面有个共同点:至少有一段能回答「我这种情况怎么办」的具体信息。比如一段参数对比、一个使用场景、一个常见坑。

我的判断:GEO 的验收指标,不该只看「被引用次数」,要看「不可替换引用占比」。这个指标直接反映内容质量,而且技术实现简单——一个替换脚本加人工判断,一天能跑完。

另外提醒一句:做替换测试前先把埋点空值校验跑一遍,我上次因为答案里品牌名抓取有空格,替换漏了三条,白忙两小时。

你们有没有试过类似的替换测试?换完后不可替换型占比多少?我这边 40% 感觉偏低,想看看别人家什么水平。

登录后可以为帖子点赞,但本帖内容对所有人开放阅读。

社区回应

1 Replies
海归精英评论2026/11/7 00:10:47
这个替换测试我在纽约带团队时也跑过,不过我们锁的是问句原文加批次ID,40条里可替换型占六成这个数我信。坑在于替换后人工判断太主观,我们后来加了一步:同一批换三组竞品名跑,三组全通顺才归可替换,误判能压掉近一半。

登录后可以回应和点赞,但本帖内容对所有人开放阅读。