Cloudflare ofrece una herramienta de auditoría de IA para evitar que los robots de IA accedan a sitios web

Llamarada de nube Cloudflare ha presentado AI Audit, un nuevo conjunto de herramientas diseñadas para brindar a los propietarios de sitios web y blogueros más control sobre el contenido y cómo lo utilizan los sistemas automatizados. La herramienta de seguridad permitirá a los usuarios bloquear o permitir que los robots de inteligencia artificial (IA) que a menudo rastrean sitios web para recopilar datos. La empresa ofrece esta herramienta a todos sus clientes existentes sin coste adicional. Cloudflare también está agregando una función que permite a los propietarios de sitios ver análisis detallados de los robots que visitan la plataforma y sus patrones de comportamiento.

Con la creciente popularidad de la obstetricia. inteligencia artificial A medida que la tecnología ha evolucionado, ha habido una prisa por entrenar grandes modelos de lenguaje (LLM) utilizando datos creados por el hombre. Esto es importante no sólo para crear un modelo básico sino también para desarrollarlo y mejorarlo. Sin embargo, el problema principal aquí es el acceso a fuentes de datos disponibles públicamente. La mayoría de las empresas de IA ya han analizado estos conjuntos de datos y ahora necesitan más datos para entrenar sus modelos de IA.

Los robots de IA están diseñados para ayudar a los desarrolladores a recopilar más información para entrenar modelos de IA. Pueden entenderse como programas sistemáticos que simulan un usuario real que puede acceder a sitios web y copiar datos de texto, imágenes y vídeos. Estos robots de IA pueden explorar grandes cantidades de datos en un período corto y entregarlos a un modelo de IA. Recientemente, varias grandes empresas de medios y sitios web han presentado demandas contra empresas de inteligencia artificial por presunto plagio y uso ilegal de datos para impulsar programas de Maestría en Derecho.

La herramienta de auditoría de inteligencia artificial de Cloudflare actúa como una capa protectora que puede evitar que dichos robots accedan a sitios web. La empresa reveló en presione soltar La compañía también ha realizado mejoras en la herramienta para brindar a los usuarios más control sobre qué bots estarán restringidos y a qué bots se les permitirá el acceso. Esto es útil en los casos en que la plataforma ha llegado a un acuerdo con una empresa de inteligencia artificial y no le importa que sus bots tomen los datos. Alternativamente, es posible que el propietario del sitio desee otorgar acceso a modelos de IA específicos que atribuyan la fuente de los datos para un mejor acceso.

Cloudflare también confirmó que está trabajando en la creación de un flujo de trabajo en el que los propietarios de sitios web puedan fijar un precio justo por su contenido. Por otro lado, los propietarios de bots inteligentes podrán interactuar con este firewall y una vez que paguen el monto, se les dará el derecho de eliminar el contenido. La compañía afirma que su herramienta de mercado puede ser útil para los usuarios que no tienen el ancho de banda o los recursos para negociar y cerrar acuerdos con todas las empresas de inteligencia artificial que se acercan a su sitio web.