Cloudflare te permitirá cobrar a ChatGPT y resto de las IA por escrapear tu contenido. Así es el pay per crawl
Cloudflare lanza el pago por rastreo (pay per crawl) para que los propietarios de páginas web puedan cobrar a las diferentes inteligencias artificiales (ChatGPT, Google Gemini o Claude) por rastrear y escrapear su contenido para el entrenamiento de sus respectivos LLM.
Cloudflare lanza en beta privada un esquema para cambiar el actual modelo de consumo de contenidos en internet, por parte de las plataformas de IA, una fórmula que ya adelantó en un evento su CEO Matthew Prince.
¿Qué es pay per crawl de Cloudflare y cómo funciona?
El modelo Pay per crawl de Cloudflare permite a los creadores de contenidos y medios cobrar por cada acceso que un rastreador de IA haga a su sitio web para entrenar modelos como ChatGPT, Gemini o Claude.
Hace unos días, Prince, no en vano, señaló que toda la internet debería ir hacia un modelo de pago por token de entrenamiento, más en la onda de lo que es Spotify, y menos hacia el esquema de abono único por toda la hemeroteca, como grupos como PRISA y otros medios decidieron.
Dicho y hecho.
La herramienta de pay per crawler de Cloudflare, aún en fase de prueba, permite que editores y propietarios de dominios definan si permiten, bloquean o cobran a los bots de inteligencia artificial por el acceso a su contenido.
Cloudflare lanza una herramienta para monetizar contenido de IA
Hasta ahora, las opciones eran sólo dos, esto es, el todo gratis o todo bloqueado.
Con esta propuesta de Cloudflare, la tercera vía es posible gracias a una combinación del olvidado código de estado HTTP 402 con mecanismos de autenticación que garantizan el pago y evitan suplantaciones.
Simon Newton, responsable técnico del proyecto, afirma que “los propietarios de contenido deben tener el control total de quién accede a sus creaciones. No se trata de bloquear o regalar, sino de permitir una relación justa y programática”.
La iniciativa introduce cabeceras específicas como crawler-max-price o crawler-exact-price, que comunican la intención de pago del crawler. Si todo cuadra, el servidor responde con un HTTP 200 OK y la transacción queda registrada.
Además, los editores pueden establecer precios fijos por solicitud, aplicar excepciones para ciertos bots, y mantener su política de seguridad actual.
Cloudflare actúa como intermediario del cobro y la liquidación con los editores.
Este sistema abre la puerta a futuros modelos donde los agentes de IA puedan negociar automáticamente el acceso a recursos digitales en función de su presupuesto y necesidad.
“Este es solo el principio de una nueva economía de contenidos para la web”, concluye Will Allen, director de producto de Cloudflare.
Cómo funciona Pay Per Crawl de cara a las plataformas de IA
El crawler debe registrarse en Cloudflare, generar claves públicas y privadas Ed25519, y firmar cada solicitud HTTP. Si el contenido tiene un coste, recibirá una respuesta 402 con el precio. Si acepta, incluye la cabecera adecuada y recibe el contenido con una respuesta 200 y el cargo confirmado.
Síguenos en Google como fuente preferente
Suscríbete a nuestro canal de WhatsApp
Hazte Premium y apoya este proyecto periodístico
Únete a mi canal de YouTube
