包括《纽约时报》、USA Today 母公司 Gannett 及 Reddit 在内的 23 家主流新闻网站和社交平台已开始屏蔽互联网档案馆（Internet Archive）的爬虫工具 ia_archiverbot。

这些机构的担忧指向同一个问题：档案馆存储的海量网页内容正被 AI 公司用于大模型训练，而它们认为这构成了版权侵权，并与自身业务形成