Topic1 篇公开帖子

#爬虫行为

该话题下聚合了社区中所有标记为「爬虫行为」的公开帖子。

CDN边缘节点TTFB从89ms压到31ms，GEO抓取频次翻了一倍

先说结论：把边缘节点的 TTFB 从 89ms 压到 31ms，同一份 sitemap 下，AI 爬虫对详情页的抓取频次从日均 420 次涨到 890 次，翻了一倍还多。上周做的一个站，GEO 侧一直反馈「收录慢、引用少」。我先没动内容，直接拉了一周的边缘日志看抓取行为。指标列一下：边缘 TTF