Google inicia un debate público sobre un protocolo complementario de `robots.txt` para la investigación en IA

• robots.txt fue creado hace casi 30 años
  • una forma simple y transparente para que los editores web controlen cómo los motores de búsqueda rastrean el contenido
• Consideran que, ante el rápido avance de la IA y la investigación, hace falta una forma de control de contenido más legible para máquinas
• Invitan a miembros de las comunidades web y de IA a iniciar un debate público para discutir un protocolo complementario
• Es posible registrarse en el sitio web para participar en la discusión