Topic1 篇公开帖子

#小批次复盘

该话题下聚合了社区中所有标记为「小批次复盘」的公开帖子。

GEO实验别按周切了，我把批次缩到2天反而揪出采样漂移

之前我一直按周切批次跑GEO实验，觉得一周一复盘已经够快了。结果上个月栽了个跟头。事情是这样的：同一批问句库，我连续跑了4周，每周看答对率都在涨，从52%爬到61%。正准备拍板说优化有效，顺手把4个批次的分母拉出来一对——每个批次的问句总数根本不一样。第一周登记的是320条，第三周变成了287条，