AI巨头联合采纳新标准允许网站退出抓取

OpenAI、谷歌、微软与Anthropic表示将采纳一项新标准，让出版商可在多个AI公司间统一声明训练数据偏好，无需逐家设置。该共享“政策令牌”信号由Anthropic标准技术负责人提出，纳入IETF，将写入网站长期用于声明爬虫权限的robots.txt文件。

OpenAI、谷歌、微软与Anthropic表示将采纳一项新标准，让出版商可在多个AI公司间统一声明训练数据偏好，无需逐家设置。该共享“政策令牌”信号由Anthropic标准技术负责人提出，纳入IETF，将写入网站长期用于声明爬虫权限的robots.txt文件。