跳到正文
热点事件观察中

四家AI公司宣布采用统一爬虫退出标准

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

OpenAI、Google、Microsoft 和 Anthropic 宣布将采用 IETF 提出的一项新标准,允许网站通过 robots.txt 文件中的共享 policy token 统一拒绝被 AI 爬虫抓取用于训练。 目前 Anthropic 已接入该信号,Google 和 Microsoft 计划于明年支持。

AI 根据报道生成 · 22 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月31日
  1. The Verge · AI
    OpenAI、Google、Microsoft 和 Anthropic 支持新的 AI 抓取退出标准

    OpenAI、Google、Microsoft 和 Anthropic 宣布将采用一项新标准,允许网站通过 robots.txt 文件中的共享 policy token 统一拒绝被 AI 爬虫抓取用于训练。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。