Cloudflare, un proveedor de infraestructura en la nube que atiende al 20% de la web, anunció el martes el lanzamiento de un nuevo mercado que repite la relación entre los propietarios de sitios web y las compañías de IA.
El año pasado, Cloudflare lanzó una herramienta amigable para el editor para lidiar con el aumento de los rastreadores de IA, incluida una solución de un solo clic que bloquea todos los bots de IA y un tablero que muestra cómo los rastreadores de IA visitan su sitio. En una entrevista en 2024, el CEO de Cloudflare, Matthew Prince, dijo a TechCrunch que estos productos sientan las bases para un nuevo tipo de mercado donde los editores pueden distribuir contenido a las compañías de IA y compensarlo.
Cloudflare ahora está haciendo realidad su mercado.
Se llama pago por rastreo y Cloudflare comenzará «experimento» en beta privada el martes. El propietario del sitio web experimental puede elegir raspar el sitio del rastreador de IA individualmente, a una velocidad establecida. Todo esto es un «rastreo» de micropagos. Alternativamente, los propietarios de sitios web pueden optar por hacer que AI rastreadores raspe el sitio de forma gratuita o bloquearlo por completo. Cloudflare afirma que la herramienta permite a los propietarios de sitios web verificar si Crawler está raspando el sitio para los datos de capacitación de IA, si aparece en las respuestas de búsqueda de IA o para otros fines.

A gran escala, el mercado de Cloudflare es una gran idea que puede proporcionar a los editores modelos comerciales potenciales para la era de la IA. También pone a Cloudflare en el corazón de todo. El lanzamiento del mercado se produce cuando los editores de noticias enfrentan preguntas existenciales sobre cómo llegar a sus lectores a medida que el tráfico de búsqueda de Google desaparece y los chatbots de IA se vuelven más populares.
No hay una respuesta clara sobre cómo sobrevivirán los editores de noticias en la era de la IA. Algunos, como el New York Times, han presentado demandas contra compañías de alta tecnología para capacitar a los modelos de IA en noticias sin permiso. Mientras tanto, otros editores han firmado acuerdos de varios años para licenciar contenido de capacitación del modelo AI y traer contenido a la respuesta de chatbot de IA.
Aún así, solo los grandes editores han atacado las transacciones de licencia de IA, y todavía no está claro si proporcionarán un flujo de ingresos significativo. Cloudflare tiene como objetivo crear sistemas más duraderos que permitan a los editores fijar el precio de sus propios términos.
La compañía anunció el martes que un nuevo sitio web configurado usando CloudFlare bloqueará todos los rastreadores de IA de forma predeterminada. Los propietarios del sitio deben otorgar permiso para acceder al sitio de un rastreador de IA en particular. Dice que con el cambio de CloudFlare, todos los nuevos dominios dan «controles predeterminados».
Varios grandes editores, incluidos Conde Nast, Time, Associated Press, Atlantic, Adweek y Fortune, se han registrado con CloudFlare para bloquear la IA de rastreo de forma predeterminada para respaldar el objetivo más amplio de la compañía de «un enfoque basado en permisos para el rastreo».
Los modelos de negocio en los que muchos de estos editores se basaron durante décadas se han vuelto poco confiables. Históricamente, los editores en línea han permitido a Google raspar el sitio a cambio de referencias de las búsquedas de Google traducidas al tráfico al sitio.
Sin embargo, los nuevos datos de Cloudflare sugieren que los editores pueden ser peores en la era de la IA que en la era de la búsqueda de Google. Algunos sitios web citan a ChatGPT como la principal fuente de tráfico, pero ese no parece ser el caso en gran parte.
En junio de este año, Cloudflare dice que encontró que cada vez que el Crawler de Google lo presentaba, había destrozado su sitio web 14 veces. Mientras tanto, el Crawler de OpenAI cortó 17,000 sitios web para cada referencia, pero la humanidad cortó 73,000 veces para cada referencia.
Mientras tanto, Openai y Google están creando agentes de IA diseñados para acceder a sitios web en su nombre, recopilar información y entregarlos directamente a los usuarios. El futuro en el que estas herramientas sean convencionales tendrá un gran impacto en los editores que confían en que los lectores visiten el sitio.
Cloudflare señala que las «verdaderas posibilidades» de los salarios por rastreo podrían surgir en el futuro de los «agentes».
«¿Qué pasa si el agente Paywall puede funcionar completamente programáticamente en Network Edge? Pregúntele a su programa de investigación profunda favorita que lo ayude a integrar las últimas investigaciones del cáncer y informes legales, o lo ayude a encontrar los mejores restaurantes en SOHO y le dará a ese agente el presupuesto para gastar para obtener el mejor contenido relevante».
Para participar en el mercado experimental de CloudFlare, tanto las compañías de IA como los editores deben configurar sus cuentas de Cloudflare. Con la cuenta, ambas partes pueden establecer un precio que deseen comprar y vender «rastreos» del contenido del editor. Cloudflare actúa como intermediario en estas transacciones, facturando a las compañías de IA y distribuyendo ingresos a los editores.
El portavoz de Cloudflare, Ripley Park, le dijo a TechCrunch que a pesar de que muchos sugieren que la moneda digital es la mejor para algo como esto, no hay rayos o criptomonedas asociadas con el salario por rastreo en este momento.
El mercado de Cloudflare se siente como una visión audaz para el futuro donde muchos editores y compañías de IA necesitan abordar. Aún así, no hay garantía de que el editor obtenga un trato justo. Dado que actualmente están frotando contenido de forma gratuita, puede ser difícil convencer a las compañías de IA para que participen.
No obstante, Cloudflare parece ser una de las pocas compañías en condiciones de hacer realidad tal mercado.
Source link
