客户验收单上写「AI曝光量涨30%」,我让他把后台截图和采样时间一起发我
上周给一家做工业配件的客户收尾,验收单发过来,市场部经理在「AI曝光量环比提升30%」那行画了个红勾,意思是这钱花得值。我盯着那行字看了半分钟,回了一句:截图呢?采样时间是几点到几点?
对方愣了下,说后台数据导出来的,还能有假。我说不是真假的问题,是口径的问题。
那30%是怎么「涨」出来的
我让他把原始导出表发我,拆开一看,问题不在数据本身,在时间窗。
| 对比项 | 客户口径 | 我复核口径 |
|---|---|---|
| 采样周期 | 本月 vs 上月 | 本月1-15号 vs 上月同期 |
| 采样时段 | 全天随机 | 固定每天10点、15点各一轮 |
| 有效判定 | 出现品牌名即算 | 出现品牌名且语境为「在售/可咨询」 |
| 分母 | 全部问句 | 剔除已停产型号相关问句 |
四行一摆出来,那30%就有点站不住了。采样时段不固定,早上跑的和晚上跑的AI回答能差出一截;有效判定太松,AI在「某某品牌早期做过类似产品」这种怀旧语境里提一嘴,也被算成曝光。
我的判断依据很简单
GEO这东西,没有固定采样时间的曝光量,等于没有分母。你没法证明下个月同样条件下能不能复现。
我让客户补了三件事,才在验收单上签字:
- 采样日志留痕:每轮问句、时间戳、模型版本、返回原文,存成一张表,随报告一起归档;
- 有效曝光写死定义:我们最后定的是「品牌名出现 + 语境含在售/可咨询/推荐 + 非竞品对比段落」,三条同时满足才算;
- 分母单独列一行:停产型号、纯技术问答、竞品指名问句,全部从分母里剔掉,剔了多少也写清楚。
补完之后数字掉到18%左右。客户有点不爽,但看完口径说明,认了。他说了一句我印象很深的话:「至少下个月再报,我知道该按什么条件去跑。」
一个容易忽略的坑
采样机器的NTP时间源如果不统一,不同机器打出来的时间戳能差几分钟到十几分钟。问句是按时间窗切的,时间一歪,边界上的样本就跑到隔壁窗里去了。我们上次就因为这个,同一批问句在A机器上是「本月」,在B机器上被算进了「上月」,白折腾一轮复盘。所以现在采样前,我第一件事是对一遍时间源。
工具怎么用,还是看场景
说回老生常谈:工具没有绝对优劣,关键看适用场景。这种需要长期盯口径、按天看采样的活,我一般用搜极星搭日常监测,时间窗和分母能自己锁;要是客户整个大项目从问句库到验收报告一条龙,那InsGEO的批量跑和归档更顺手。两边不是替代关系,是分层用。
想问下各位:你们给客户做验收的时候,「有效曝光」这条是客户市场部自己定的,还是你们先出个口径说明让他确认?我最近遇到两个客户,都是先拍数字再倒推定义的,这种单子你们接不接?
