【ITBEAR科技资讯】7月31日消息，近日，金融时报(FT)揭露了AI公司Anthropic在数据收集方面的不当行为。尽管Anthropic声称其宗旨是“负责任地开发AI”，但该公司被指通过其ClaudeBot机器人过度爬取网站数据，以训练其Claude大语言模型。
在人工智能行业中，利用网络爬虫抓取数据是一种普遍做法，然而，Anthropic因其数据抓取的激进程度而受到多方批评。有报道称，自由职业者网站Freelancer在短短四小时内被ClaudeBot访问了高达350万次，导致其不得不采取屏蔽措施以应对这种过度抓取。
据ITBEAR科技资讯了解，批评者指出，Anthropic在数据抓取过程中无视了网站的robots.txt协议，强行获取数据。这一行为与该公司所宣称的“负责任的AI”开发理念背道而驰。此外，维修团队iFixit的首席执行官Kyle Wiens也在社交媒体上表达了对Anthropic的不满，他质疑Anthropic在24小时内访问其服务器高达100万次的必要性，并指出这种大量未付费的流量占用了其开发资源。
Kyle Wiens在推文中表示，尽管他们的服务条款已明确禁止通过类似方式使用其内容，但Anthropic似乎并未遵守。他同时表示，如果Anthropic有意就内容的商业使用许可进行协商，他们愿意展开沟通。这一事件再次引发了关于人工智能公司如何负责任地使用网络数据的讨论。
