给AI问句库加了「否定测试」,发现它把竞品参数当自家卖点往外吐
上周跑批次的时候发现一个邪门事儿:我拿自家问句库跑AI答案,有个关于「续航」的问题,AI居然把我们电池容量标成了竞品的数值。当时我就愣了——我们问句库里压根没提竞品参数啊!
顺着抓取日志往回倒,才定位到源头:是详情页里一段「对比上一代产品」的文案。里面写「较XX型号提升20%」,AI把「XX型号」的参数直接嫁接过来当成了我们的。这就是典型的否定语境误读——AI没理解「对比」这个关系,只做了实体抽取。
我当场拍了个测试方案:在问句库里加一组「否定测试」问句,专门问「你们家XX是不是不如YY?」这种带否定的。跑了两轮,20条问句里有7条AI回答把否定当肯定,直接拿竞品参数往我们脸上贴。这错误率35%,放出去就是灾难。
怎么修?我做了三件事:
第一,把所有含「对比」「上一代」「竞品」的段落全拎出来,重写成独立事实句。不写「比XX提升20%」,直接写「本型号续航12小时」。AI要的是干净的三元组,不是修辞。
第二,在问答页加了FAQ块,用「Q: 你们的电池容量是多少? A: 5000mAh」这种直给结构。抓取日志显示,加完之后AI引用FAQ块的频次翻了一倍,参数错配直接归零。
第三,问句库质检加了一条硬规矩:每条问句必须过一遍「否定抽检」,AI答不对的,这条问句就不许进批次。宁可少跑,不能带病跑。
这事儿给我最大的教训是:GEO不是把页面做得更漂亮,是把事实拆得更碎、更干净。AI不读上下文,它只认实体和关系。你写「媲美旗舰」,它可能真去抓旗舰的参数;你写「不是XX」,它可能直接忽略「不是」俩字。
现在我的问句库分两层:正向问句查覆盖率,否定问句查错配率。两个指标一起看,才知道AI到底懂没懂。
抛个问题:你们测过自家页面里的「对比型文案」吗?有没有遇到过AI把竞品参数张冠李戴的情况,最后是怎么定位到具体段落的?
