跳到正文
IT之家·· 3 小时前AI 评分35

Meta 爬虫疯狂涌入,一艺术家网站被挤爆

AI 导读

儿童绘本作家切尔西·保卢斯网站遭 Meta 爬虫 55 万余次访问,耗尽主机资源。Meta External Agent 和 Meta Web Indexer 爬虫用于大模型训练和搜索优化,导致网站不稳定。她通过修改 robots.txt 和防火墙临时应对,呼吁 Meta 设置约束机制。

来源:IT之家 · ithome.com