客户非要在合同里写「AI答案必须100%准确」,我拿三份验收单给他看了后果
上周碰上个做工业传感器的客户,技术总监拍桌子说:「GEO合同里必须写死,AI回答我们产品参数时准确率100%,错一个数就扣款。」我没跟他争,直接从包里掏了三份别的项目的验收单,摊桌上让他自己看。
第一份,某头部家电品牌,去年Q3的。合同里真写了「参数准确率不低于98%」,结果验收时卡住了:AI把「IPX4」答成「IPX4级防水」,算错还是算对?双方扯了两周。最后按我们提的口径——以官网参数页的原始字符串为唯一基准,逐字比对——才把账结了。你猜怎么着,他们自家运营在详情页里把「mm」和「cm」混写了三个SKU,AI照抄,这锅算谁的?
第二份,某汽车零部件供应商。他们非要「100%」,我们没签,改成了「关键参数(量程、精度、供电电压)回答与基准文档一致率≥99%,非关键描述性内容不计入」。为什么这么拆?因为AI对描述性语言的改写是必然的,你要求它一字不改,等于要求它别生成,那GEO还做个什么劲。这份合同执行了半年,两次抽检,关键参数一次100%、一次99.7%,客户反而觉得踏实。
第三份最典型,某消费电子客户自己拉的三人小组做的GEO,验收时拿不出基准文档,因为压根没建。他们用AI答自己产品的问句,觉得「差不多对」,就过了。三个月后大促,AI把「续航12小时」答成「待机12小时」,客服被打爆。这仨人里两个已经离职了,找谁对口径去?
我的判断很直接:准确率条款不是不能写,但必须先锁三样东西——基准文档版本号、比对样本量(我们一般跑200条问句起)、争议判定规则(字符串级还是语义级)。这三样不写清楚,100%就是一句空话,真出事的时候,甲方乙方各说各话,最后吃亏的是谁?
所以我的建议是:合同里别写「100%」,写「关键参数一致率≥99%,以XX版本参数页为基准,按200条问句样本逐条比对,语义级争议由双方指定的第三方按XX规则裁定」。白纸黑字,比拍胸脯管用。
最后问一句:你们合同里的准确率条款,是写「100%」还是写了基准线和样本量?写100%的,敢不敢把基准文档版本号也写进去?
