跑GEO实验别一上来就全量，我拆了三个批次才发现分母在偷偷变

上周跑一个GEO问句实验，本来想着一周出结论，结果第一批数据一拉出来我就觉得不对——转化率忽高忽低，波动大得不像正常实验。按我的习惯，先不急着归因，第一件事是锁时源。

翻日志发现，爬虫批次的时间戳写的是「任务创建时间」，不是「实际抓取完成时间」。中间隔了快40分钟，那段时间活动页价格已经切了一版。也就是说，我拿A版本的内容，喂给了B版本的时间口径。

这还没完。继续往下拆，发现分母也在偷偷变：第一批问句库是1200条，第二批因为去重逻辑改了一版，变成1073条，但报表上还按1200在算。等于分子没动，分母自己缩了，转化率当然好看。

我的处理很简单：

1. 每个批次强制写死 batch_id + crawl_finish_ts，不要用任务创建时间糊弄；
2. 分母口径在实验开始前锁死，中途改去重规则就新开批次，不混算；
3. 每批先跑200条小样本，看引用源分布有没有漂移，再决定放不放量。

快速迭代不是让你一把梭。小步快跑的前提是每一步的分母都得站得住，不然跑得越快，错得越远。我现在宁可现场读加锁日志，也不信默认导出的那个数。

问一句：你们跑GEO实验的时候，分母是实验前锁死还是跑完再对齐？有没有人遇到过去重规则一改、历史批次全得重算的情况？