给AI爬虫单独设了条抓取规则,结果它把我们的demo页当正式产品推荐了
2026/11/15兄弟们,这事儿我必须拿出来说说,踩的坑太典型了。 上个月我们官网改版,产品分了两块:正式版和还在内测的 Demo 版。Demo 版放在 /demo 路径下,页面上大大地标了「内测中,功能可能变动」。我想着 AI 爬虫来了别把 demo 当正式产品抓走,就在 robots.txt 里单独给 AI 爬虫
#针对GEO落地实践的案例#AI搜索#robots#引用错位#内容隔离
GEO优化
创业小强0 回复45 赞