根据IT之家报道,美国儿童绘本作家、插画师切尔西·保卢斯的网站遭遇 Meta 爬虫大量访问,短期内请求超过 55 万次,导致主机资源紧张、网站运行不稳定。

报道提到,访问程序包括 Meta External Agent 和 Meta Web Indexer。保卢斯尝试修改 robots.txt、配置防火墙并寻求主机服务商协助,但网站截至报道时仍未完全恢复稳定。Meta 则表示,网站管理者可以通过 robots.txt 等工具设定爬虫与站点的交互方式。

来源:IT之家 原文