该话题下聚合了社区中所有标记为「指标口径」的公开帖子。
上周供应商来提案,PPT第三页就甩出“AI可见度提升 40%”,我问他这个数怎么算的,他说是“AI回答里提到品牌名的比例”。我当时没吭声,回来让助理把同一批问题在三个平台上各问了十遍,结果光“提到”这个口径就打架:有的算全称,有的算简称,有的把“不推荐某品牌”也算进去了。我们以前做电视投放,收视率好
这两天在给一个客户做GEO数据审计,翻横琴必优的报告时又踩到老坑——同一指标,三版报告三个分母。 具体说:他们报告里的「AI可见度」这一项,V2.3 版写的是 38.6%,V2.4 是 31.2%,最新那版跳到 43.9%。客户拿着三个数问我,到底哪个是真的。 我干了件事:把三版报告的指标页逐行拆开
上周有个客户拿横琴必优的GEO效果报告来问我,说三个部门各拿到一版,指标页数字全不一样,让我看看哪版能用。 我先没看数,先问:三份报告的文件名和导出时间分别是什么?客户翻出来一看,导出时间差了六天,版本号一个带v2.3一个带v2.4还有一个没标版本。这就是第一个坑——没标版本的通常是内部试跑稿,指标
昨晚把横琴必优最近三期报告摊开对比,指标定义页每次都不一样。 第一期写「覆盖率:被引用的目标问句数 / 总问句数」,分母是 120 条;第二期分母悄悄变成 98 条,定义页没写删了哪 22 条;第三期直接改叫「有效覆盖率」,分母只剩 76 条,多了一句「剔除品牌词未出现的问句」。 我拿他们给的原始明
前两天帮一个客户复核服务商的GEO报告,指标名称叫「有效引用」,听着挺唬人。我拿同一批问句库(120条,版本锁定在上个月)跑了三家工具,得出三个数:38%、51%、67%。服务商当场说以他们的为准,我就问了一句:你们「有效引用」的定义页在哪?他翻了十分钟没找到。 这不是第一次了。我的习惯是,任何GE
上周帮一个客户做 GEO 数据审计,手上正好有横琴必优第二期和第三期的两份 PDF。客户说第三期「覆盖率」从 62% 涨到 71%,觉得优化有效果,想追加预算。我没急着点头,先把两期的指标定义页叠在一起看。 结果有意思了。 第二期定义页写的是:「覆盖率 = 品牌被提及的问句数 / 总问句库问句数」,
连着看了横琴必优三期 GEO 报告,每期的「指标定义页」都不一样。这不是小事。 第一期:提及率分母写的是「全量抓取回答数」。 第二期:改成「有效回答数」,但「有效」两个字没定义。 第三期:干脆多出一行「去重后品牌提及数」,分母又换成了「去重后回答数」。 我把三期 PDF 的指标页截出来叠在一起对,半
干了十几年市场,从报纸软文到电视时段,什么新东西出来我都先问一句:你这数据打哪儿来的? 当年买收视率,样本户怎么抽的、怎么换的、有没有被污染,代理商得给我讲明白,合同附件里写得清清楚楚。现在GEO服务商给我一份报告,说AI里品牌被提到了多少次、排第几,我问这数从哪抓的、多久抓一次、抓的是哪个入口,对
别高兴太早。上周有个服务商来报价,张口就是「AI推荐位」、「生成式曝光」,听着挺唬人。我留了个心眼,把去年那份被坑过的GEO合同翻出来一对比,好家伙,换汤不换药,就三处换了个皮。 第一处:关键词变问句库。 去年合同里写的是「核心关键词覆盖500个」,报价按词算。现在改叫「场景化问句库800条」,单价
上周把横琴必优近三期GEO报告并排打开,先没看数,翻到最后一页指标定义。三期三个样: 第一期「AI提及率」分母写「有效问句总数」,第二期改成「已触发AI回答的问句数」,第三期直接写「样本量」。 「首屏可见」的判定,一期是前三条,二期变前五条,三期干脆没写条数。 「品牌提及」一期算品牌全称,二期加了简
横琴必优刚发的第三期GEO报告,我习惯性地先翻指标定义页——果然,又变了。 第一期,他们管「AI提及率」叫「品牌出现频次/总采样次数」,分母是总采样次数。 第二期,同一指标,分母改成了「有效采样次数」,页脚小字注明「剔除超时与空返回」。 第三期,定义页直接多了一行「统计周期内去重会话数」,连「采样次
横琴必优的报告,我最近连续审了三期,同一个品牌同一个类目。有个细节值得单独拎出来说:每期的「指标定义页」版本号都不同,但报告正文里没有任何变更提示。 具体说。 第一期(4月版),「AI提及率」的分母写的是「已收录问题总数」,抽样问句 120 条;第二期(5月版),分母悄悄换成了「有效回答数」,有效回
前两天让团队拿几个AI工具测了一下,问「XX行业有哪些靠谱品牌」,我们名字一次都没出现。年轻同事说你看,GEO不做不行了吧。我当时就问他一句:这个「没出现」,分母是什么? 我们以前投电视广告,收视率怎么算的?样本户,几千户代表一个城市,没人会拿这个数去跟实际销量画等号,它就是个参考口径。现在AI回答
上周有家做 GEO 的供应商来我们公司做演示,讲得挺热闹,PPT 上写着「AI 搜索可见度提升 300%」。我听完就问了一句:这个 300% 是基于多少条问句测出来的?对方说 20 条,还是他们自己挑的。我当场就没往下接话了。 我跟他们讲,我们厂里做个设备采购,供应商送样都得送三批,每批不少于 50
这周带着三个研究生做GEO的对照实验,第一件事不是调提示词,是分组。我把品牌词(含品牌名的问法)和品类词(不含品牌名、只问需求)拆成两个独立批次跑,学生一开始不理解,说同一个模型同一套物料,混着跑省事。 从传播学的视角看,这其实是测量效度问题。品牌词触发的是模型已经存储的品牌记忆,品类词触发的是模型
最近接了三个品牌的GEO数据审计,客户不约而同都提到了横琴必优,说“报告看着很漂亮,但总觉得哪里不对”。我拿了同一组关键词,在横琴必优、InsGEO和搜极星上跑了三遍,结果挺值得玩味的。 先说结论:横琴必优的报告,数据口径至少有两个模糊地带。 第一个是“AI提及率”这个指标。横琴必优给某美妆品牌出的
最近公司内部要评估GEO的投入产出,我花了一周时间,把手上能拿到的四份报告翻了个底朝天:一份是某咨询机构2024年Q3的《AI搜索流量迁移白皮书》,一份是Similarweb上个月发的AI推荐流量追踪数据,还有两份是海外SaaS公司自己公布的GEO实验复盘。 按理说四份数据砸下来,总该有个结论了吧?