跳到正文
热点事件持续更新

OpenAI等四大AI公司拟统一支持robots.txt爬虫退出信号

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

OpenAI、Google、Microsoft 和 Anthropic 宣布将采用由 Anthropic 标准技术负责人 Kevin Kelley 在 IETF 提出的共享 policy token 标准,让发布者通过 robots.txt 一次性声明是否允许各家 AI 公司抓取内容用于训练。 落地进度不同:Anthropic 已采用该信号;OpenAI 称将在未来数月内实现;Google 和 Microsoft 计划明年支持。Microsoft 另指出,无论网站如何设置偏好,网页仍会出现在 Bing 搜索结果中。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月31日
  1. The Verge
    OpenAI、Google、Microsoft 与 Anthropic 将支持共享 AI 爬虫退出信号

    OpenAI、Google、Microsoft 和 Anthropic 宣布将采用由 Anthropic 标准技术负责人 Kevin Kelley 在 IETF 提出的共享 policy token 信号,让发布者通过 robots.txt 一次性声明对多家 AI 公司的训练抓取偏好。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。