页面速度日志翻了三遍,发现AI爬虫根本不认你LCP的预加载
最近在调一个客户站的GEO效果,发现AI摘要里产品参数老是缺一块。我先锁了页面速度口径:用CrUX的LCP 75分位和TTFB做对照,先拆变量再动结构。
场景是这样的:客户官网产品页LCP 2.1s,TTFB 340ms,按说还行。但我把服务器日志里GPTBot和ClaudeBot的抓取记录单独拉出来,对比了自己用Lighthouse跑的trace,发现一个很具体的问题——我们为了方便真人首屏,给主图加了<link rel="preload">,但AI爬虫的抓取请求里这个preload基本被忽略,它走的是文档流顺序,主图在HTML里排在第7个节点,前面压着两个异步加载的推荐位脚本。结果就是,爬虫拿到的有效正文占比被这些脚本切得很碎。
我做了组对照:A版保留preload和异步脚本,B版把推荐位改成服务端渲染延迟注入、主图挪到正文第一个节点。跑了72小时,B版被AI摘要引用的产品参数条数从3条涨到9条。差距不在LCP本身,而在渲染树里正文的可见顺序。
另一个坑是结构化数据的dateModified。客户CMS自动更新这个字段,但只精确到日,而且每次保存都刷新。AI摘要里显示的“最后更新”跟实际内容改动对不上,我翻了三天发布日志才发现,有两次是编辑只改了SEO标题,正文没动,dateModified却也跳了。后来我改成只在正文或参数表有diff时才写新时间,并且统一成ISO 8601带时区,和sitemap里的lastmod对齐。改完一周,摘要里“更新时间”的口径终于稳定。
我的判断依据是:页面速度对GEO的影响,不能只看LCP一个数,得看AI爬虫抓取时渲染树里正文节点的可达顺序,以及时间字段的写入逻辑是否和内容变更严格绑定。先锁字段口径,再拆速度指标,不然调了半天都调在真人体验上,机器那边没动。
想问下各位:你们有没有单独统计过AI爬虫抓取时的TTFB分布?跟真实用户的P75差多少?我这边样本还太少,想交叉验证一下。
