AI巨头承诺为出版商提供新方案以阻止数据抓取

新闻要点

以下内容根据亚洲新闻台报道整理

OpenAI、谷歌、微软和Anthropic四家科技巨头于10月31日宣布，将联手为媒体和网站提供一种统一的机制，以防止其内容被用于训练人工智能模型。这一举措旨在解决新闻出版商日益增长的担忧，并应对由此引发的日益激烈的批评和法律纠纷。目前，网站管理员需要针对每一个爬虫机器人设置多条屏蔽指令，而新方案允许他们只需输入一条标准化的指令，就能被所有采用该协议的AI公司识别并执行。

该方案目前尚处于提议阶段，预计不会立即全面生效。微软计划于2027年2月1日开始实施，谷歌则计划在2027年内的某个时间点实施。OpenAI表示将在“未来几个月”推出，而Anthropic称其已“开始”部署。值得注意的是，这一设置仅适用于未来的模型训练，并不阻止机器人对网站进行常规抓取，且内容默认允许被抓取，直到网站管理员主动更改设置。

这一公告发布之际，出版商正面临大量机器人抓取其文章以喂养AI模型的浪潮，部分机构如《纽约时报》已提起诉讼。此前，互联网基础设施提供商Cloudflare自2025年7月起已默认屏蔽AI机器人，且“Really Simple Licensing”标准也允许出版商向访问其页面的机器人收费。Meta发言人Andy Stone在社交媒体上表示支持这一努力，认为向多个提供商传达此类偏好的共同信号是重要的一步。