Anthropic AI公司被指责在24小时内爬取网站数据达百万次，涉嫌过度爬取。
编辑日期：2024年07月31日
虽然利用网络爬虫获取数据是人工智能行业的常见做法，但Anthropic因其采取的激进方法而受到了批评。
自由职业者网站Freelancer也表示，ClaudeBot在四小时内对其访问了350万次，迫使他们不得不屏蔽它。批评者指出，Anthropic无视网站的robots.txt协议，强行抓取数据，这与其所倡导的“负责任的AI”理念背道而驰。
7月24日，维修团队iFixit的首席执行官Kyle Wiens发布了一条推文，内容翻译如下：
这些用户并没有向我们支付费用，却占用了我们的开发资源，这实在是不太合理。
我们的服务条款已明确规定禁止以这种方式使用我们的内容，但你看一看@AnthropicAI的做法。
如果 @AnthropicAI 希望就我们内容的商业使用许可进行交流，我们非常愿意进行沟通。
