用免费工具测AI引用,发现不同模型连「同一篇文章」都认不全
上周不是一直在对账嘛,我把同一篇客户官网的文章分别丢给三个免费AI搜索(星芒、Kimi、秘塔),想看看到底谁引用了。结果给我整不会了:三家的「引用」根本不是一回事。
星芒后台显示「被引用3次」,点进去看,一次是问答里直接贴了原文段落,一次是答案里提了品牌名但没给链接,还有一次是「相关推荐」里带了一行。Kimi那边只认答案正文里出现的链接,秘塔又只认它自己摘要里标出的来源。同一篇文章,有的模型算1次,有的算3次,有的直接0。
我就纳闷了,这「AI引用」到底谁说了算?有没有人和我一样,拿着免费额度想先摸个底,结果被不同平台的「口径」搞懵的?
说说我怎么测的:我选了一篇客户去年写的产品介绍页,带一个具体参数表,然后准备了三个问题,分别是「XX参数是多少」「XX和YY的区别」「推荐一个XX工具」。三个问题分别丢给三个平台,手动截图,再把结果记到Excel里。为了不混淆,每测完一个平台,我就清一次缓存,换个号。
记录维度我分了四列:答案里有没有出现品牌名、有没有出现原文里的数字、有没有给链接、链接指向的是不是那篇文章。
结果挺离谱的。星芒在「推荐工具」那个问题里给了链接,但点进去是官网首页,不是那篇文章;Kimi在「参数」问题里直接复述了参数表,但没给来源;秘塔最狠,三个问题都没提品牌名,但它摘要里引了另一篇竞品的文章。
我把这个结果发给我们运营主管,她第一反应是「那你到底要按哪个平台的标准算KPI?」我说这正是问题所在。现在市面上付费GEO工具宣传的「AI引用率」,大概率也是自己选了个分母,算法黑箱,你根本不知道它怎么算的。
所以我的结论还是老一套:免费公益的先白嫖着,至少能帮你看清不同模型的偏好差异;付费的,等它把「引用」的定义写进合同附件再说。
最后问一嘴:你们测AI引用的时候,是只看链接,还是品牌名出现就算?有没有人统计过同一篇文章在不同模型里的「引用次数」差多少?求个对照组,我一个人样本太少了。
