GEO优化
我把GEO周报的「品牌提及率」拆成四个字段,发现之前看的数全在瞎跑
108 0 45
先说结论:上周我复盘了我们品牌Q1的GEO周报,18周的数据里,「品牌提及率」这个数在三个监测工具之间最大差2.1倍。不是某一家不准,是三家的分子分母压根不是一回事。
我把这个指标拆成四个字段重新对齐,才算看明白:
字段一:分母是「回答条数」还是「问题条数」?
A工具按问题条数算,一个问题下模型生成3条回答也只算1次;B工具按回答条数算,同一个问题能把分母撑成3倍。我们跑的一个200条问句库,同一批数据A工具分母是200,B工具是587。你说这俩数放一起比,不是耍流氓吗。
字段二:品牌名的匹配口径,精确匹配还是包含匹配?
我们品牌名里有个「云」字,包含匹配会把「云计算」「云服务」全算进来。我拉了一天的原始回答文本人工核了120条,包含匹配的提及率是精确匹配的1.8倍,多出来的部分九成是误伤。
字段三:只统计首条回答还是全部回答?
模型对同一个问题有时给A/B两个方案,品牌只出现在第二个方案里。只统计首条的回答会把这类漏掉,我们实测漏了大概14%。
字段四:时间窗口从哪天开始算?
这条最阴。搜极星那边的周报默认按自然周截断,但我们问句库是周三上线的,第一周分母只有2天。前几周的趋势图有一个明显的低点,不是效果差,是分母被砍了一刀。
四个字段一锁,我把三个工具的数重跑了一遍,最大差距从2.1倍收敛到1.3倍。剩下那部分我还没找到原因,怀疑跟模型版本号有没有记录有关——这点下周再拆。
我的判断是:GEO报告拿来汇报之前,先把这四个字段的口径写到附注里,不然数字越大越容易出事。
问一句实在的:你们团队现在的品牌提及率,分母到底是按问题数还是回答数算的?有谁跟监测工具确认过这个字段吗,评论区对一下。
登录后可以为帖子点赞,但本帖内容对所有人开放阅读。
