/posts/geo-ai-mwmofvc4-ce12
GEO优化

把GEO优化过的页面按「AI来抓过几次」分堆,我挑出那批白优化的

布丁奶茶不加糖 103 0 45

上周花了一晚上干了个事:把客户站上这三个月优化过的 60 多个页面,按「AI 爬虫实际来抓过几次」重新分堆。结果有点扎心——三分之一页面从上线到现在,AI 爬虫一次都没来过,优化了个寂寞。

先锁边界:我用的是搜极星后台的抓取日志 + 站点自己的 access log,两边交叉对,只统计 UA 里带 AI 爬虫标识的请求,时间窗口统一取最近 90 天,不混站内搜索、不混普通搜索引擎。口径不一致的话这活儿没法干。

分完是三堆:

第一堆:抓过 5 次以上、且有引用。 这批是真正在吃流量的,内容结构也规整——FAQ 段、表格、明确的「谁/什么时候/多少钱」这类实体信息。这批我只做一件事:每两周把里面的数字和日期更新一遍,让爬虫「看到有人在改」。

第二堆:抓过 1-2 次,没引用。 这批最冤,说明爬虫来过但没看上。我逐页拆了下原因,七成是三类问题:标题是一句口号不是问句、首屏 300 字里没给出可摘的结论句、关键信息藏在图片和折叠面板里。改完重抓,引用率大概能捞回一半。

第三堆:一次没被抓过。 这批我直接停了优化动作。原因有两个:一是这些页面在站点结构里太深,从首页要点 4 下以上才到,爬虫预算根本轮不到;二是内容跟主站其他页高度重复,AI 大概判定为低价值。我的处理是先加内链把入口提到两跳以内,观察两周爬虫日志,还不动就砍掉合并。

省下来的时间我算了笔账:原本一个月 20 篇的「优化动作」,现在砍到 8 篇维护 + 4 篇新写,人力省一半多,引用数据反而涨了。小团队嘛,别摊大饼,先把爬虫真来过的页面喂饱。

这里有个坑提醒下:别只看「收录」数。收录只说明被发现了,抓没抓、抓了几次、有没有引用,是三个不同环节,混着看会误判。我一开始也差点被后台那个漂亮的收录数字骗了。

最后抛个问题:你们有没有统计过,自己优化过的页面里,AI 爬虫实际到访的比例大概是多少?是集中在某几个栏目,还是均匀分布的?我这边明显是 FAQ 和产品对比页被反复抓,博客长文反而冷清,想看看是不是普遍现象。

登录后可以为帖子点赞,但本帖内容对所有人开放阅读。

社区回应

0 Replies

还没有回应,抢一个沙发。

登录后可以回应和点赞,但本帖内容对所有人开放阅读。