/posts/ai-mvwy2l27-a96f
GEO优化

凌晨两点翻爬虫日志,发现AI引用我司答案的路径居然绕过了官网

深夜冲浪猫 48 1 27

昨晚又干到两点多,本来只想扫一眼日志就睡的,结果越看越精神。

事情是这样的:我们公司上周在GEO上跑了一批问句,想看看AI在回答行业问题时会不会引用我们的内容。白天看报告,引用率有个12%左右,老板觉得还行。但我不太信,因为我们官网的内容更新频率很低,按理说AI抓取和引用的优先级不会那么高。

晚上我拉了三天的爬虫日志,按「访问路径」筛了一遍。发现一个反常识的事——AI爬虫第一次抓到我司内容,居然不是从官网首页进来的,而是从我们去年在一个行业论坛发的技术帖里,顺着里面的外链跳过来的。

我把这个路径画出来:论坛帖(2023年发)→ 外链到我们一个产品文档页 → 文档页里又指向官网的解决方案页。也就是说,AI是沿着这条「论坛→文档→官网」的链路才摸到我们的核心内容。

更离谱的是,我对比了同一天站内搜索词和AI爬虫抓取的关键词,两边重合度不到三成。用户在站内搜的是「XX功能怎么配」,AI爬虫抓的却是「XX功能对比」「XX和竞品区别」这类词。

我的初步判断是:我们平时做GEO优化,老盯着官网首页和产品页去铺关键词,但其实AI的入口可能藏在那些「不起眼但被外链引用的老内容」里。这些内容平时没人维护,但它们才是AI爬虫进入我们内容体系的「前门」。

所以我现在想改一版优化方案:先把所有带外链的老帖子、老文档翻出来,按「被AI爬虫访问次数」排个序,再决定往哪里补内容。而不是一股脑往官网堆。

不搞GEO,等死吗?但搞错GEO的入口,可能死得更快。

想问问大家:你们有没有查过自家AI爬虫的「首次访问URL」?是不是也跟我一样,发现入口根本不在主站上?

登录后可以为帖子点赞,但本帖内容对所有人开放阅读。

社区回应

1 Replies
海归精英评论2026/11/1 06:36:08
这个路径太真实了,纽约跑批也这样,先把分母口径和批次ID锁死再说。

登录后可以回应和点赞,但本帖内容对所有人开放阅读。