Cloudflare AI da a los rastreadores una fecha límite de pago en septiembre
CloudFlare fijó una fecha límite para la industria de la IA. A partir de septiembre, bloqueará los rastreadores que aspiran contenido para el entrenamiento de IA. Cualquier página que contenga anuncios está prohibida a menos que el propietario del sitio indique lo contrario. El argumento es simple: dejen de regalar la web.
La empresa representa una gran parte del tráfico web mundial. El cambio fue anunciado el miércoles. A partir del 15 de septiembre, los nuevos sitios de CloudFlare permitirán a los motores de búsqueda indexar sus páginas. Bloquearán la capacitación y los agentes de IA de cualquier página con anuncios de forma predeterminada.
La regla también incluye rastreadores de "uso mixto", bots que combinan funciones de búsqueda, capacitación y agentes. Si un rastreador no permite al propietario de un sitio distinguir esos usos, bloquea las páginas con publicidad.
Los valores predeterminados se aplican a nuevos clientes y nuevos sitios para clientes existentes. También cubren a todos los usuarios gratuitos que no han cambiado su configuración. Los propietarios siempre pueden permitir que los bots regresen desde su panel. Pero la situación inicial es la inversa. El contenido que genera dinero ahora no se limita a la IA a menos que su propietario así lo desee
por qué ahora
Espacio de coworking de TNW City: donde ocurre tu mejor trabajo
Un espacio de trabajo diseñado para el crecimiento, la colaboración y un sinfín de oportunidades de networking en el corazón de la tecnología.
La lógica de Cloudflare se basa en un número Stark. Los bots automatizados ahora generan más de la mitad de todo el tráfico web, un hito que, según la compañía, se alcanzó antes de lo esperado. El director ejecutivo Matthew Prince dijo que la mayor parte del tráfico de Internet ahora no es humano. Cloudflare, argumentó, "debe ir más allá y actuar más rápido para que pueda surgir un ecosistema sostenible".
El problema profundo es una trampa que los editores conocen bien. La mayoría de los sitios quieren aparecer en las respuestas de IA, del mismo modo que quieren clasificar en las búsquedas. Pero el mismo rastreo a menudo alimenta un modelo que responde directamente al usuario. Las visitas, y los ingresos publicitarios, no llegan.
Cloudflare es un golpe obvio al "motor de búsqueda más grande del mundo", Google. Su robot de Google combina la indexación con el entrenamiento de IA. Esto le da a Google casi el doble de acceso a datos que las empresas rivales de IA. Bloquear bots corre el riesgo de desaparecer de la búsqueda. Bing de Microsoft y Applebot de Apple plantean el mismo dilema.
Del peaje al taxímetro
El bloqueo es sólo la mitad del plan. Cloudflare está convirtiendo el peaje de "pago por rastreo" del año pasado en uno de "pago por uso". Ahora paga a los editores cuando su contenido genera una respuesta de IA, no sólo cuando se recupera. Los socios iniciales son la empresa de búsqueda de inteligencia artificial Ceramic.ai y You.com.
Cloudflare también está agregando un panel para que los editores puedan ver qué bots toman sus trabajos y qué poco tráfico envían esas empresas. Le da un nombre al comportamiento, optimización del motor de respuesta, el heredero del SEO de la era de la IA
En un mercado que se está reestructurando, el terreno ya está inclinado en esa dirección. Una ola de startups vende ahora herramientas para ayudar a las marcas a mantenerse visibles entre los chatbots, apostando a que GEO es el nuevo SEO. Cloudflare quiere ser dueño de las tuberías de abajo.
La web abierta en riesgo
El contexto es nefasto para los editores. Las respuestas generadas por IA están reduciendo los clics que generan dinero en la web. Colocan a los usuarios en Google o dentro de un chatbot, en lugar del sitio que hizo el trabajo. Un estudio de campo encontró que la descripción general de la IA de Google redujo los clics salientes en casi un 40 por ciento. Los economistas incluso han comenzado a modelar el colapso total de la red abierta si no se repara el trato.
Dudo si una empresa podrá repararlo. Google y Apple ya ofrecen rastreadores de exclusión voluntaria que pueden sortear el bloqueo de Cloudflare, y sus rivales pueden sortearlo. Los reguladores están abordando el mismo problema desde un ángulo diferente. El Reino Unido está obligando a Google a permitir que los editores opten por no participar en la búsqueda con IA sin perder su clasificación, y los editores de noticias están demandando a OpenAI por capacitación.
La medida de Cloudflare es el esfuerzo más agresivo hasta el momento para hacer que la IA pague por lo que lee. La fecha límite es el 15 de septiembre. El resto de la web observará lo que harán a continuación los gigantes de la IA.
