Topic1 篇公开帖子

#试错跑太快

该话题下聚合了社区中所有标记为「试错跑太快」的公开帖子。

试错跑太快，实验组和对照组的分母根本不是同一批人

上周刚踩了个坑，直接说结论：快速迭代没问题，但每次试错前必须先把实验组和对照组的分母口径锁死，不然跑得越快错得越离谱。事情是这样的。我们上周跑了一轮 GEO 问句库的 A/B 试错，两周做了三轮，节奏拉满。第一轮跑完看数据，实验组引用率比对照组高了 11 个点，团队直接嗨了，准备全量铺。我当时多嘴