/tags/tag-7kajgy
Topic1 篇公开帖子

#老配置复盘

该话题下聚合了社区中所有标记为「老配置复盘」的公开帖子。

翻出15年前给蜘蛛留的sitemap老表,发现AI爬虫还在按它抓页面

2026/11/2

这几天整理老服务器备份,翻出来一份 2010 年左右的 sitemap.xml 和一张手写的优先级对照表。当年为了对付 Google 蜘蛛,我把栏目页 priority 设 0.8,文章页 0.6,tag 页 0.4,还特意把 pagination 的 changefreq 标成 daily。那会儿

#SEO#AI搜索#做了15年SEO的资深站长#抓取预算#sitemap#老配置复盘#翻出15年前给蜘蛛留的sitemap