La disputa entre Cloudflare y Perplexity: lo que todos los usuarios web deberían saber

🚨 Resumen del caso

El 4 de agosto de 2025, Cloudflare criticó públicamente a Perplexity, el motor de búsqueda de IA, como un "incumplidor de estándares web"

⚔️ Argumentos de ambas partes

Alegación de Cloudflare: "crawling encubierto"

• Perplexity habría eludido el bloqueo de crawling en 4 etapas
  1. Intentó acceder como bot oficial
  2. Cuando fue bloqueado, cambió de táctica de inmediato
  3. Se hizo pasar por un navegador Chrome
  4. Volvió a acceder cambiando la dirección IP
• También resumió y recopiló sin autorización sitios bloqueados por robots.txt

Réplica de Perplexity: "agente representativo del usuario"

• No es un crawler tradicional, sino una IA para procesar solicitudes de usuarios
• No guarda contenido y solo lo usa para respuestas en tiempo real
• Sostiene que Cloudflare analizó mal el tráfico de BrowserBase

💡 Opinión del autor: Cloudflare resulta más razonable

1. La suplantación de identidad no es una práctica legítima
2. robots.txt es un estándar web respetado desde 1994
3. Una estructura parasitaria que le quita ingresos al sitio original
4. Existen casos de cumplimiento ejemplares, como OpenAI

🔮 Perspectivas futuras

• Actualización de robots.txt para la era de IA
• Construcción de un sistema de autenticación para crawlers de IA
• Expansión de la monetización del acceso a contenidos
• Fortalecimiento de la regulación legal