Los nombres más importantes de la IA respaldan una nueva forma de excluirse del scraping

OpenAI, Google, Microsoft y Anthropic han acordado apoyar una nueva señal compartida de "token de política" que los editores pueden usar para excluirse del scraping de IA. Propuesto por Kevin Kelley, líder técnico de estándares en Anthropic, dentro del Internet Engineering Task Force (IETF), el token residirá en el archivo robots.txt de un sitio web, el mecanismo que desde hace tiempo indica qué rastreadores web pueden acceder a un sitio. Actualmente, los editores deben establecer sus preferencias de entrenamiento de IA por separado con cada empresa de IA; este token compartido les permite aplicar sus preferencias a varias empresas a la vez. Las cuatro empresas afirman que restringirán el acceso de sus rastreadores de IA a un sitio cuando encuentren el token. Microsoft ofrecerá además controles más granulares que permitirán a los editores excluirse por separado del entrenamiento de IA o del AI grounding, el proceso de dirigir un modelo de IA a una fuente de información verificada para reducir las alucinaciones, y señala que los sitios seguirán apareciendo en los resultados de búsqueda de Bing independientemente de sus preferencias. Anthropic ya ha adoptado la señal, Google y Microsoft planean apoyarla el próximo año, y OpenAI dice que la implementará en los "próximos meses". La medida se produce mientras los editores lidian con la continua afluencia de rastreadores de IA, y algunos recurren a alternativas como el estándar Really Simple Licensing (RSL), que permite a los editores cobrar a los rastreadores, y el bloqueo predeterminado de rastreadores de IA por parte de Cloudflare.

(Fuente：The Verge)