给AI喂了三个月问句库,我发现「带数字」的问句引用率最高
先上数据,不废话。
我们团队从去年12月开始建问句库,到现在攒了1400多条真实用户问法。前阵子我闲着没事,让同事把这批问句按「句式特征」打了标签,然后拉出每条问句对应的AI引用情况做交叉比对。结果出来我盯着屏幕看了半天——
带具体数字的问句,引用率是纯定性问句的1.9倍。
具体说,「XX产品续航多久」这种,AI引用我们官网参数页的概率是31%;而「XX产品续航8小时够不够用一天」这种带数字的,引用率直接干到59%。
我第一反应是不信,觉得可能是样本偏差。于是又单独挑了200条做对照,把同一批问题的「纯问法」和「带数字问法」成对跑,结论没变,差距稳定在1.6到2.1倍之间。
我的判断是这样的:
AI在检索和生成的时候,带数字的问句相当于给了一个「锚点」。它更容易判断哪个页面能回答这个问题——因为页面里如果有「8小时」「续航」这些具体词,匹配度肉眼可见地高。而「续航多久」这种问法太泛,AI要在一堆页面里猜,猜错的概率自然大。
踩过的坑也说一下:
一开始我们无脑往问句库里塞数字,结果翻车了。像「XX适合3-5人使用」这种,AI会把「3-5人」当成硬约束,遇到6人场景直接不推荐我们。后来我让同事把数字分成「参数类」和「场景类」两类,场景类的数字全部拿掉,只保留参数类的。改完之后,误伤率降了一大截。
还有一个细节:数字最好用阿拉伯数字写在问句里,别写「八小时」。我们实测下来,阿拉伯数字的问句被AI正确匹配的比例高出十几个点,估计跟分词和索引有关。
现在的做法:
问句库每条都强制标注「是否含参数数字」,含数字的单独建一个优先级池,预算有限的时候先跑这批。上个月算下来,同样采样成本下,有效引用条数多了大概四成。
现在不做,更待何时!
想问问各位:你们问句库里带数字的问句占比大概多少?有没有人试过把「时间跨度」类数字(比如「用三个月后」)单独拆出来测?我怀疑这类数字的引用逻辑跟参数数字完全不是一回事,正打算跑一批对照,有做过的兄弟指点一下!
