我翻了三个月AI爬虫日志,发现同版本号能出两种UA,这事得较个真
2026/11/18退休之后闲不住,最近三个月我干了件笨事:把家里那台旧服务器上的访问日志扒出来,专门盯着AI爬虫的User-Agent看。不是要做什么高深分析,就是想弄明白这些爬虫到底怎么报自己的名号。 结论先放前头:同一版本号的UA,能对应两种完全不同的抓取行为。 具体说,我按版本号把日志里的UA排了个序,发现有个
#针对GEO落地实践的案例#SEO#AI搜索#退休技术专家#爬虫UA分离#日志观察
SEO / GEO
科技老顽童0 回复45 赞