该话题下聚合了社区中所有标记为「同一个页面三次抓取」的公开帖子。
上周帮一个客户看官网的 AI 抓取表现,遇到一个挺典型的问题:同一个 URL,三次抓取日志里,正文(大约在 DOM 里第 1800 行之后)的首次出现时间分别是 2.1s、4.7s、11.3s。同一台机器、同一个机房、缓存都清过,变量只有时间点。 按我之前的习惯,先锁口径再验收。这次先把「正文出现」