DuckDB y httpfs detrás de un proxy: el secreto que nadie te cuenta
•
Bases de Datos
Tag: Cloudflare
4 entradas encontradas
Cloudflare Innovates Again: Cryptographic Authentication for Bots (The End of Fake User-Agents)
7 min de lectura
The Problem We All Know (But Pretend Doesn’t Exist)
As someone who has managed web infrastructure for decades, I’ve seen too many bots pretending to be what they’re not. User-Agent: “Mozilla/5.0 (Windows NT 10.0; Win64; x64)” when in reality it’s a Chinese scraper sucking up your content at 3 in the morning.
Traditional methods for identifying legitimate bots have been, let’s be honest, pathetic:
- IP ranges: That change, are shared, or are spoofed
- User-Agent headers: That anyone can forge in one line of code
- Reverse DNS: That works until it doesn’t
Today Cloudflare announced that it’s integrating HTTP Message Signatures directly into its Verified Bots program. And after reading the technical details, I have to admit something: this could definitively change the rules of the game.
Cloudflare vuelve a innovar: autenticación criptográfica para bots (el fin de los user-agents falsos)
7 min de lectura
El problema que todos conocemos (pero fingimos que no existe)
Como persona que gestiona infraestructuras web desde hace décadas, he visto demasiados bots fingiendo ser lo que no son. User-Agent: “Mozilla/5.0 (Windows NT 10.0; Win64; x64)” cuando en realidad es un scraper chino aspirando tu contenido a las 3 de la mañana.
Los métodos tradicionales para identificar bots legítimos han sido, seamos honestos, patéticos:
- Rangos de IP: Que cambian, se comparten, o se spoofean
- Headers User-Agent: Que cualquiera puede falsificar en una línea de código
- Reverse DNS: Que funciona hasta que no funciona
Hoy Cloudflare anunció que está integrando HTTP Message Signatures directamente en su programa Verified Bots. Y después de leer los detalles técnicos, tengo que admitir algo: esto puede cambiar las reglas del juego definitivamente.
Cloudflare acaba de cambiar las reglas del juego con 'Pay per Crawl' (y era hora)
5 min de lectura
“Content Independence Day”: el día que la web dijo “ya basta”
Hoy, 1 de julio de 2025, Cloudflare declaró oficialmente el “Content Independence Day” con el lanzamiento de “Pay per Crawl”, su nueva herramienta que permite a los propietarios de sitios web cobrar a los crawlers de IA por acceder a su contenido. Como DevOps Manager que gestiona infraestructuras web diariamente, puedo decir que era hora.
Y es que los números no mienten: mientras Google mantiene una relación de 18 crawls por cada referral que envía (que ya es brutal comparado con los 6:1 de hace seis meses), OpenAI tiene un ratio de 1,500:1 y Anthropic llega a los 73,000:1. Básicamente, están aspirando todo nuestro contenido sin devolver ni una migaja de tráfico.
Cloudflare Just Changed the Game with 'Pay per Crawl' (and it was about time)
5 min de lectura
“Content Independence Day”: the day the web said “enough is enough”
Today, July 1, 2025, Cloudflare officially declared “Content Independence Day” with the launch of “Pay per Crawl”, its new tool that allows website owners to charge AI crawlers for accessing their content. As a DevOps Manager who manages web infrastructures daily, I can say it was about time.
And the numbers don’t lie: while Google maintains a ratio of 18 crawls for every referral it sends (which is already brutal compared to 6:1 from six months ago), OpenAI has a ratio of 1,500:1 and Anthropic reaches 73,000:1. Basically, they’re sucking up all our content without returning even a crumb of traffic.