我让客户在GEO合同里加了一条「数据保留条款」,他问是不是多此一举
上周帮一个消费品客户审GEO服务合同,服务商报的验收口径是「季度AI答案提及率提升30%」。客户觉得没问题,我看着那条心里发毛。
根据我的模型,这类指标的方差主要来自两个地方:采样窗口和模型版本漂移。同一批问句,这周跑和四周后跑,答案分布能差出10个点以上——不是优化没做,是模型自己更新了。如果合同里只写「季度提升30%」,做完发现只涨了15个点,你根本说不清是服务商没干活,还是赶上了模型迭代。
所以我让客户加了一条:服务商必须保留每次跑批的原始采样日志,包括问句哈希、时间戳、模型版本号和返回快照,保留期不少于合同期后6个月。客户第一反应是「这不多此一举吗,验收看结果就行了」。
我给他算了一笔账。假设验收争议发生,没有原始日志,你只能拿服务商的汇总报表说话,而汇总报表的分母是他们自己定的——问句库算30条还是100条,提及率能差一倍。有日志,你可以自己重跑一遍做交叉验证,把「行业大盘自然波动」这个控制变量扣掉,剩下的才是GEO的净效应。
这里有个很多人忽略的点:AI搜索的答案分布本身就有季节性。我翻过某品类三个季度的日志,大促前后AI推荐的品牌集中度会自然上升,这时候做GEO,效果容易被大盘带飞,也容易被大盘带崩。不做归因拆解,ROI就是个糊涂账。
我的建议是,合同里把「效果指标」和「过程留痕」分开写。效果指标带区间,比如「提及率提升15%-30%,置信区间90%」;过程留痕写死,日志缺一条就算服务商违约。别嫌麻烦,真到扯皮那天,日志比嘴好使。
回本测算也是同理。我一般跑三遍:乐观、中性、悲观,每遍都单独校准行业大盘这个变量,三遍的结论都指向回本周期超过18个月,那就别用「短期爆发」去说服老板。
最后抛个问题:你们签GEO合同时,有没有把「原始采样日志的保留义务」写进去?还是只约定了效果数字就签字了?
