拿车间三年的「异常处理记录」喂AI,答案跟老师傅口述对不上,我追到批次号才明白
老周问一句:你们喂给AI的「产品知识」,有没有从车间那堆手写记录里来的?
上个月我干了件笨事。为了把售后问答做准,我把车间三年的异常处理记录——就是老师傅用圆珠笔写在表格上那种,有设备停机、有工艺微调、有批次返工——扫描了大概两百来页,简单整理成问答对,喂给了我们试用的那个AI客服系统。
我想得挺美:这不就是把老师傅脑子里的东西掏出来了吗?开船不能只看风向,还得看水流,这水流就是车间实际。
结果头一周答出来的东西,跟老师傅口述对不上。
举个例子。有个问句是「B系列铸件表面气孔多怎么办」,AI答「建议调整浇注温度至1380℃」。我拿去问车间李师傅,他瞄了一眼说:「那是三年前冬天的事,现在砂型换了供应商,温度早调到1410了,而且要先看是不是涂料批次的问题。」
我回头查记录——果然,那份记录是2021年12月的,后面还有一行小字「待验证」,没人跟进。AI把「待验证」当成了「已验证」。
这就是我今天想说的坑:车间老资料不是不能喂AI,但得先分清楚哪条是结论、哪条是过程、哪条是死胡同。我后来做了三件事:
第一,每条记录后面加一列「状态」,只标三种:已固化、待验证、已废弃。喂之前先把「待验证」和「已废弃」的挑出来,单独放一个文件夹,不混进主库。
第二,凡是带批次号的记录,必须把批次号保留在原句里。AI答的时候如果引用了某条,我能顺着批次号追到原始工单,看当时到底改了啥。这个动作救了我——有一批返工件,AI说「已解决」,我追批次号发现那批是让步接收,根本没解决。
第三,让老师傅口述一遍,拿录音转文字,跟AI答案逐条对。对不上的不是改AI,是改记录。记录本身有歧义,AI只是把歧义放大了。
做完这三步,我们那个售后问答的准确率,我自己抽了五十条问句盲测,从六成出头提到了八成五左右。没花一分钱外包,就是费眼睛。
但我心里还有个疙瘩:车间记录里那些「手感」「听声音」的经验,文字根本记不下来。比如李师傅说「这个声音发闷就得停」,AI永远学不会。这部分我暂时不打算硬喂,先空着。
所以想问问各位:你们处理这种「老师傅口述经验」的时候,是硬转成文字喂进去,还是干脆划一条线,告诉AI「这块你不知道就说不知道」?这个线怎么划,我心里没底。
