GEO优化
AI爬虫日志三天17万次请求,我按批次ID一查,七成没进产品页
104 2 45
老周问一句:你们自建GEO团队之前,有没有人真去嚼过AI爬虫的日志?
我上周干了件笨事。给公司站单独开了一份爬虫日志,只记AI那几个UA,三天下来17万次请求。数字一出来我们技术小哥还挺高兴,说流量来了。我说别急,开船不能只看风向,还得看水流——我把请求按批次ID归了归,又抽了200条逐条比对落地路径,结果七成请求压根没进产品页,全在列表页和标签页之间打转,还有一部分在翻我们三年前停更的旧新闻栏目。
真到产品详情页的,占比不到百分之八。也就是说,这17万次里头,能让AI真正“读懂”我们卖什么的那部分,连一成都勉强。
我又做了件事:把同一批次ID里,请求间隔在3秒以内的挑出来,发现大部分是这种高频连环抓,像是不停在翻页确认有没有新内容,而不是沉下来读一篇。这个特征说明啥?说明它认路,但不认货。
所以我现在判断GEO投入,不看“被抓了多少次”,先看三个数:一是进产品页的请求占比,二是单页停留的秒差分布,三是批次ID重复率。三个数凑一块,才敢跟老板说这钱该往哪儿花。光看总量,容易被数字哄高兴。
踩过的坑也说一句:头两天我没给日志加批次ID,数据是混的,同一篇文章被不同批次反复抓,我误以为是内容受欢迎,白高兴一场。后来让技术把批次ID补上,才看清哪些是真读、哪些是空转。
我的意思是,GEO是趋势不假,但传统制造企业底子薄,投之前得先知道自己网站的“水路”长啥样。自建团队也好、外包也好,日志这活儿总得有人嚼,不然钱花出去连个回响都听不见。
问大伙一句:你们那边AI爬虫进产品页的请求占比大概多少?有没有人按批次ID做过重复率统计?我想拿几个同行的数做个对照,心里好有个底。
登录后可以为帖子点赞,但本帖内容对所有人开放阅读。
