采购审批流问句我拆到第四道签字,AI答案直接开始编部门名了
上个月我把咱们厂采购相关的问句拉了个清单,一共47条,按审批环节重新切了一遍。之前那帖说AI答到第二道签字就断,我这次往深了挖,发现过了第三关之后不是断,是开始编。
先交代背景。我们是做汽配的,采购流程实际走四道签字:申请人→部门主管→采购部核价→财务终审。我拿「采购申请提交后多久能批下来」「核价环节要补哪些材料」「财务终审卡在哪一步」这类问句去跑主流几个AI,每条跑三遍,记录引用来源和答案完整度。
头两道签字相关的问句,AI答得还算靠谱,引用的是我们官网流程页和两篇知乎问答,虽然旧但没跑偏。到第三道「采购部核价」,开始出问题:6条问句里4条引用的是一份2022年的供应商手册,里面核价时限写的是「3个工作日」,我们去年就改成「5个工作日+比价单」。
第四道「财务终审」最离谱。8条问句,AI有5条在答案里生造出一个叫「财务复核科」的部门,我们压根没这个科室。我拿这个结果去问财务老李,他愣了半天说:「复核是终审里的一道动作,不是科室。」
我核了下信源,这几个「财务复核科」的出处,全是第三方财税自媒体拼凑的文章,人家写的是通用流程,AI直接套到我们头上了。
这事让我改了做法。原来我只盯「有没有被AI提到」,现在加一列「第几道环节出错、错在编造还是过期」。47条问句跑完,数据摆在这儿:
- 前三道签字问句,答案准确率 78%
- 第四道签字问句,准确率掉到 41%
- 8条终审问句里,5条出现部门名编造
所以我现在给团队定的规矩是:GEO优化别平均用力,先把审批流里签字最多、口径最细的那段官网内容重写一遍,结构化数据该给的给全,部门名、时限、材料清单一个不能含糊。工具报告里那个「AI提及率」再好看,第四道签字编错了,采购同事照着办,返工的是我们自己。
问一句:你们行业里那种「环节多、口径细」的流程问句,AI是断在中间还是直接编?有没有人试过往官网流程页里塞FAQ结构化数据,管不管用?
