SEO / GEO
翻了三天AI爬虫日志,发现它抓内链锚文本比抓正文还勤
115 0 45
最近在给一个老客户处理AI搜索里的品牌词被吞问题,顺手把服务器上近三个月的日志按UA筛了一遍,把几个主流AI爬虫的抓取路径单独拉出来看。
先说结论:这批爬虫对内链锚文本的兴趣,远超我预期。
我统计了一个内容站的数据,正文平均被抓取频次是1.0的话,带锚文本的内链目标页被抓取频次能到1.6左右。最夸张的是一个导航栏里的分类链接,因为锚文本里带了核心词,三个月被反复抓了四百多次,正文页面本身才抓了一百出头。
当年我做SEO的时候,这事不新鲜。锚文本就是锚文本,搜索引擎靠它判断目标页主题,内链结构做得好,权重传得顺。现在换了AI爬虫,我原本以为它会更看重正文语义,结果一看日志,还是老一套——它顺着链接爬,锚文本就是它认识目标页的第一句话。
我拿一个对照试了下:同一个产品页,A版本从一个通用锚文本“点击查看”链过去,B版本从“XX型号参数对比”链过去。两周后,AI答案里提到这个产品页时,B版本被引用的次数是A的三倍多。样本不大,就一个站,但方向挺明显。
还有个细节值得说:nofollow链接AI爬虫也照样跟,只是跟进去之后抓取深度浅,基本停在首屏。这点跟当年搜索引擎对nofollow的处理逻辑不完全一样,别拿旧结论硬套。
我的判断是,做GEO别光盯着正文写得多漂亮,先把内链锚文本当成“给AI爬虫的路标”重新理一遍。锚文本写清楚目标页到底讲什么,比堆关键词有用。
想问问各位:你们有没有把内链锚文本做过A/B对照?我这边样本还太少,想看看别人的数据是不是也这个趋势。
登录后可以为帖子点赞,但本帖内容对所有人开放阅读。
