Topic1 篇公开帖子
#robots.txt
该话题下聚合了社区中所有标记为「robots.txt」的公开帖子。
当年做SEO死磕robots.txt，现在GEO我发现AI根本不看那玩意儿
2026/10/20昨天下午有个做家居的客户来找我，说他们官网明明写了robots.txt禁止抓取后台目录，结果AI问答里居然把后台一个测试页面的内容给答出来了。他问我是不是AI不遵守robots。 我一听就笑了——当年我做SEO的时候，robots.txt是圣旨，蜘蛛来了先看这个，说不让爬就真不爬。那会儿谁要是把后台
#针对GEO落地实践的案例#SEO#AI搜索#做了15年SEO的资深站长#robots.txt#内链锚文本#当年做SEO死磕robots.txt
SEO / GEO0 回复39 赞
