United exige permiso por escrito a los agentes de IA y Amazon bloquea a 99 bots y agentes en su robots.txt, también en amazon.es

Si te gusta mi contenido, dile a Google que te lo muestre antes:

United Airlines cambió el 11 de noviembre de 2026 sus términos de uso: ningún agente de IA puede usar su web ni su app sin permiso previo por escrito, mientras que los buscadores que indexan páginas públicas quedan exentos, y su robots.txt no nombra a ningún agente. El robots.txt de Amazon bloquea a 99 bots y agentes, entre ellos ChatGPT-User, Claude-User y Perplexity-User, y amazon.es tiene la misma lista, aunque ese salto es de mayo de 2026. eBay, por su parte, ha bloqueado a Muse, el agente de Meta, sin reflejarlo en su robots.txt.

United cambia sus términos de uso: los agentes de IA necesitan permiso por escrito y los buscadores no

United Airlines actualizó el 11 de noviembre de 2026 los términos de uso de su web. El texto define como «Automated Agent» a «an AI assistant or agent, a bot or scraper, a browser extension, or a feature built into a browser or app», y establece que ningún agente automatizado puede usar la web ni la app «without United's prior written permission».

Las excepciones están en el mismo texto. Quedan fuera los buscadores que indexan las páginas públicas de united.com («search engines indexing public pages»), las tecnologías de asistencia y los navegadores normales manejados por una persona, aunque no las funciones de agente que lleve ese navegador. Los términos prohíben además usar sus datos para «train, fine-tune, ground, evaluate» modelos de IA.

En sus preguntas frecuentes sobre agentes, United dice que las reservas hechas con agentes antes del 11 de noviembre no se cancelarán, y a la pregunta de si trabaja ya con algún agente responde «Not yet». Search Engine Journal recoge, citando al Wall Street Journal, la frase de su consejero delegado, Scott Kirby: «I don't want to create another middleman».

El robots.txt de United no nombra a ningún crawler ni agente de IA. A 16 de noviembre solo tiene un grupo general y otro para HuaweiSymantecSpider, así que la restricción vive en los términos de uso. La frase que cita Search Engine Journal como texto de los términos no coincide con la redacción publicada hoy en united.com, y aquí se cita la de la web de United.

El robots.txt de Amazon bloquea a 99 bots y agentes de IA, y amazon.es tiene la misma lista

He descargado el robots.txt de amazon.com el 16 de noviembre y tiene 100 grupos con Disallow: / y 99 nombres distintos, porque ClaudeBot aparece dos veces. El robots.txt de amazon.es bloquea exactamente los mismos 99; solo cambian las rutas del grupo general.

En la lista hay crawlers de entrenamiento (GPTBot, CCBot, ClaudeBot, Google-Extended, meta-externalagent, Bytespider) y de búsqueda con IA (OAI-SearchBot, Claude-SearchBot, PerplexityBot), pero también agentes que actúan por encargo de una persona: ChatGPT-User, Claude-User, Perplexity-User, MistralAI-User, Manus-User, GoogleAgent-Shopping, GoogleAgent-Mariner, Gemini-Deep-Research y Google-NotebookLM. No todos son de IA; entran también EtaoSpider (el buscador de compras de Alibaba), PetalBot (Huawei), SemrushBot-SWA y Linguee Bot.

Fuera de la lista quedan Googlebot, Bingbot, Applebot y Applebot-Extended, que solo están sujetos al grupo general, de modo que la indexación en los buscadores clásicos no se bloquea. Amazonbot, el crawler de la propia Amazon, tampoco aparece.

Gráfico de barras con el número de bots y agentes con bloqueo total en el robots.txt de amazon.com: 3 en noviembre de 2024, 8 en agosto de 2025, 34 en noviembre de 2025, 47 en febrero de 2026 y 99 desde mayo de 2026
Evolución de los bloqueos totales en el robots.txt de amazon.com. Fuente: elaboración propia a partir de las capturas de Wayback Machine y del fichero actual de amazon.com.

Las capturas de Wayback Machine permiten seguir la serie. En noviembre de 2024 había 3 bloqueos (EtaoSpider, GPTBot y CCBot), el 1 de noviembre de 2025 eran 34 y en febrero de 2026, 47. El salto a 99 no es de esta semana: la primera captura con la lista larga es del 15 de mayo de 2026, y desde entonces no ha cambiado. Las cifras de 2025 se movieron rápido (23 el 1 de octubre, 45 el 1 de diciembre), así que el «34 en 2025» corresponde a un día concreto.

Con los agentes por encargo de usuario, robots.txt no siempre se aplica. OpenAI dice de ChatGPT-User que «Because these actions are initiated by a user, robots.txt rules may not apply». Para saber cuáles de todos estos nombres llegan de verdad a una web y con qué frecuencia, la referencia son los logs del servidor (Cómo saber qué bots de IA visitan tu web y cuántas veces).

eBay bloquea a Muse, el agente de Meta, sin pasar por robots.txt

El acuerdo de usuario de eBay prohíbe el acceso automatizado «including, without limitation buy-for-me agents, LLM-driven bots, or any end-to-end flow that attempts to place orders without human review», salvo con su permiso previo. Esa cláusula está en vigor desde febrero de 2026, y la versión actual del acuerdo se aplica a los usuarios existentes desde el 28 de junio.

The Verge informó el 10 de noviembre de que Muse, el agente de compras de Meta (Meta lanza Muse, el agente que compra y reserva por ti, pero solo en Estados Unidos), estaba bloqueado en eBay desde el fin de semana anterior. Según PPC Land, una portavoz de eBay, Sybille St. Arromand, dijo que la compañía aplica «a selective approach» con los agentes, sin explicar el caso de Muse, y Meta declinó comentar. eBay no publica qué agentes tienen permiso ni cómo se solicita.

El robots.txt de eBay incluye un comentario que dice «Checkouts are strictly for human users» y bloquea por completo, con algunas rutas permitidas, a GPTBot, ClaudeBot, CCBot, PerplexityBot o meta-externalagent, entre otros. Muse no aparece en el fichero. Amazon ya había cortado a Muse la posibilidad de comprar en Amazon.com el 20 de septiembre, según PPC Land.

Robots.txt, términos de uso y WAF: dónde se decide el acceso de los agentes

Search Engine Journal publicó el 13 de noviembre un artículo de Chris Green con el subtítulo «Robots.txt is voluntary, and real enforcement may be happening without your SEO team knowing». Su argumento es que una lista de bloqueo no basta, que hace falta una política por tipo de bot (entrenamiento, recuperación, agentes por encargo de usuario, agentes de compra) y que las reglas del CDN o del WAF pueden contradecir lo que dice el robots.txt.

Los tres casos usan vías distintas. United lo hace en los términos de uso, Amazon en el robots.txt y eBay con un bloqueo que no figura en ningún fichero público. La misma semana, OpenAI lanzó ChatGPT Wallet y pidió a las tiendas lo contrario, que configuren su CDN para reconocer y dejar pasar a sus agentes (OpenAI lanza ChatGPT Wallet para que sus agentes paguen con tarjeta y pide a las tiendas que no los bloqueen por error).