OpenAI, Google, Microsoft y Anthropic apoyan una sola señal en robots.txt para que los sitios se excluyan del entrenamiento de IA
Las cuatro grandes de la IA se comprometieron a respetar un mismo token en robots.txt para excluir un sitio del entrenamiento de sus modelos. Es un borrador en la IETF y Google lo aplicará en 2027.
Google anunció el 30 de octubre que apoyará una señal común en robots.txt, el token «__usage_ai-training», para que un sitio pueda excluirse del entrenamiento de modelos de IA de todas las empresas participantes con una sola regla; Microsoft, OpenAI y Anthropic se comprometieron el mismo día. La propuesta es un borrador individual en la IETF escrito por Kevin Kelley, de Anthropic, que no es todavía un estándar. Google la aplicará a comienzos de 2027 y tratará esa exclusión como un bloqueo de Google-Extended, salvo que el sitio indique otra cosa; OpenAI dice que la implementará en los próximos meses.
Esta noticia apareció en las ediciones N° 054, N° 055, N° 056 de AI Radar.