该话题下聚合了社区中所有标记为「防盗链」的公开帖子。
这几天翻服务器日志,专门看几个AI爬虫的请求记录,越看越眼熟。当年做SEO的时候,百度蜘蛛抓图片被防盗链挡住,返回403,图片索引全掉,我折腾了一下午改nginx规则才放行。这两天在日志里又看见一模一样的事:AI爬虫来抓产品图,先请求HTML,然后跟着img的src去拉图,结果被防盗链规则拒了,连续