Google, OpenAI, Microsoft y Anthropic acuerdan una línea en el robots.txt para frenar el entrenamiento de IA

Por primera vez, Google, Microsoft, OpenAI y Anthropic se pusieron de acuerdo en algo: una sola línea en el robots.txt de tu web para decir «no quiero que usen mi contenido para entrenar IA». Todavía no funciona, pero conviene entender ya qué hace y qué no, porque mal usada te puede sacar de las respuestas de Gemini.

Qué se anunció

El 30 de octubre, Google, Microsoft y OpenAI publicaron que van a respetar una señal compartida de exclusión del entrenamiento de IA. La propuesta es un borrador presentado ante la IETF (el organismo que define estándares de internet) por Kevin Kelley, de Anthropic. Ojo: es un borrador individual, todavía no es un estándar oficial ni tiene mecanismo para obligar a nadie a cumplirlo.

La sintaxis es un grupo común dentro del robots.txt, con un «agente» especial:

  • User-Agent: __usage_ai-training
  • Disallow: / (no entrenar con nada)
  • Allow: /press-kit/ (excepción opcional para una carpeta)

Si tu robots.txt no tiene ese grupo, no estás expresando ninguna preferencia. Y el clásico User-Agent: * no cuenta.

Cuándo empieza a funcionar

  • Google: apunta a 2027 (su documentación dice «principios de 2027»).
  • Microsoft (Bing): empieza a respetarlo el 1 de febrero de 2027 y el 1 de marzo deja de leer NoArchive y NoCache como señales para IA.
  • OpenAI: «en los próximos meses», sin fecha.
  • Anthropic: ya empezó a trabajar en el soporte, sin fecha.

Lo que tenés que saber antes de tocar nada

  • No afecta el SEO clásico: no frena el rastreo ni cambia tu posición en Google o Bing.
  • No te saca de AI Overviews ni del Modo IA de Google: eso se maneja por otro lado.
  • Puede sacarte de Gemini: Google lo va a tratar como un bloqueo de Google-Extended, que también cubre el uso de tu contenido para fundamentar respuestas en la app de Gemini y Vertex AI, salvo que permitas Google-Extended de forma explícita.
  • En Microsoft, entrenamiento y «grounding» (usar tu web para responder en Copilot) son preferencias separadas.

Qué hacer con tu web o la de tus clientes

  1. Definí la estrategia: si vivís de que la IA te recomiende (GEO), bloquear a ciegas puede jugarte en contra.
  2. Revisá tu robots.txt actual: fijate si ya bloqueás GPTBot, ClaudeBot o Google-Extended y si eso es coherente con lo que querés.
  3. Si querés no entrenar pero sí aparecer en Gemini, vas a tener que permitir Google-Extended de forma explícita junto con el nuevo grupo.
  4. Agendá 2027 y seguí las notas oficiales de cada empresa: los detalles finales pueden cambiar.

¿Querés aprender a posicionar tu marca en la era de la IA, del SEO al GEO, sin perderte en tecnicismos? Sumate a nuestros cursos de IA en MateandoconIA y armá tu estrategia con mate en mano.

Fuentes

(Visited 1 times, 1 visits today)

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *