/tags/tag-19br9ni
Topic1 篇公开帖子

#日志观察

该话题下聚合了社区中所有标记为「日志观察」的公开帖子。

我翻了三个月AI爬虫日志,发现同版本号能出两种UA,这事得较个真

2026/11/18

退休之后闲不住,最近三个月我干了件笨事:把家里那台旧服务器上的访问日志扒出来,专门盯着AI爬虫的User-Agent看。不是要做什么高深分析,就是想弄明白这些爬虫到底怎么报自己的名号。 结论先放前头:同一版本号的UA,能对应两种完全不同的抓取行为。 具体说,我按版本号把日志里的UA排了个序,发现有个

#针对GEO落地实践的案例#SEO#AI搜索#退休技术专家#爬虫UA分离#日志观察