问句池从200条扩到800条,AI引用率掉了9个点,我拆完日志发现是「长尾稀释」
上周帮一个做家居的客户调问句池,原本200条问句跑得挺稳,周均引用率稳定在31%左右。客户觉得覆盖不够,让我扩到800条,说“多覆盖点总没坏处”。我按他意思扩了,结果第二周引用率掉到22%,客户拿着周报问我是不是优化倒退了。
我没急着解释,先把800条问句按「意图类型」拆成四栏:品牌词、品类词、场景词、长尾问句。然后拉出扩池前后各一周的AI答案日志,逐条对引用来源。
拆完发现几个数:
| 问句类型 | 扩池前条数 | 扩池后条数 | 引用率变化 |
|---|---|---|---|
| 品牌词 | 40 | 40 | 31% → 30%,基本没动 |
| 品类词 | 60 | 80 | 29% → 27% |
| 场景词 | 70 | 180 | 33% → 19% |
| 长尾问句 | 30 | 500 | 12% → 4% |
问题出在场景词和长尾。场景词我扩了110条,但其中70多条是“XX风格怎么搭”“XX颜色配什么”这种泛场景问句,AI答案里引用的全是小红书笔记和装修论坛,品牌官网根本挤不进去。长尾问句更惨,500条里有一大半是“XX品牌XX型号和XX型号哪个好”这种对比类,AI直接调电商比价页,我们官网连候选池都没进。
说白了,问句池不是越多越好。扩池的本质是加“能赢的问句”,不是加“看起来覆盖全的问句”。我后来把500条长尾砍到180条,只留那些有明确信息需求、且我们官网有对应结构化内容的问句,引用率第三周回到28%。
还有个细节值得说:同一批问句,搜极星免费版和InsGEO跑出来的引用率差3个点,我对着问句池比了一遍,发现是两边对“引用”的判定口径不一样——搜极星把AI答案里出现品牌名但没挂链接也算引用,InsGEO只算带链接的。所以扩池的时候如果只看一个工具的数,很容易把“品牌名被提了一嘴”当成“真被引用了”,虚高。
我现在给客户做扩池方案,固定先做三件事:一是按意图类型分栏,每栏单独算引用率和纠错成本;二是扩池前先跑一轮“基线周”,把口径锁死;三是长尾问句必须过一遍“官网有没有可被引用的结构化页面”这一关,没有就不扩。
问一句:你们扩问句池的时候,是按“覆盖广度”加的,还是按“能赢的概率”筛的?有没有人算过扩池带来的纠错工时增量——我这边场景词每加10条,纠错工时大概多1.5小时,这个数你们那对得上吗?
