Tag: Crawlers

2 entradas encontradas

Cloudflare acaba de cambiar las reglas del juego con 'Pay per Crawl' (y era hora)

Cloudflare acaba de cambiar las reglas del juego con 'Pay per Crawl' (y era hora)

5 min de lectura

“Content Independence Day”: el día que la web dijo “ya basta”

Hoy, 1 de julio de 2025, Cloudflare declaró oficialmente el “Content Independence Day” con el lanzamiento de “Pay per Crawl”, su nueva herramienta que permite a los propietarios de sitios web cobrar a los crawlers de IA por acceder a su contenido. Como DevOps Manager que gestiona infraestructuras web diariamente, puedo decir que era hora.

Y es que los números no mienten: mientras Google mantiene una relación de 18 crawls por cada referral que envía (que ya es brutal comparado con los 6:1 de hace seis meses), OpenAI tiene un ratio de 1,500:1 y Anthropic llega a los 73,000:1. Básicamente, están aspirando todo nuestro contenido sin devolver ni una migaja de tráfico.

Cloudflare Just Changed the Game with 'Pay per Crawl' (and it was about time)

Cloudflare Just Changed the Game with 'Pay per Crawl' (and it was about time)

5 min de lectura

“Content Independence Day”: the day the web said “enough is enough”

Today, July 1, 2025, Cloudflare officially declared “Content Independence Day” with the launch of “Pay per Crawl”, its new tool that allows website owners to charge AI crawlers for accessing their content. As a DevOps Manager who manages web infrastructures daily, I can say it was about time.

And the numbers don’t lie: while Google maintains a ratio of 18 crawls for every referral it sends (which is already brutal compared to 6:1 from six months ago), OpenAI has a ratio of 1,500:1 and Anthropic reaches 73,000:1. Basically, they’re sucking up all our content without returning even a crumb of traffic.