Cloudflare y OpenAI han publicado los primeros resultados de un piloto en el que las señales de la red de Cloudflare ayudan al rastreador de búsqueda de ChatGPT a descubrir páginas nuevas: con una muestra de alrededor del 1 % de la red, OpenAI ha descubierto e indexado cientos de millones de páginas que no conocía. Para las webs que usan Cloudflare abre una vía de descubrimiento que no depende del sitemap ni de los enlaces, aunque la decisión de indexar y posicionar esas URL sigue siendo de OpenAI.
Las claves del piloto de Cloudflare y OpenAI para ChatGPT en 20 segundos
- Cloudflare comparte metadatos de su red para que ChatGPT descubra URL y sepa cuándo cambian.
- Con un 1 % de la red, OpenAI ha indexado cientos de millones de páginas nuevas.
- No se comparte contenido para entrenar modelos y no hay datos de clics hacia las webs.
El anuncio, firmado el 15/10/2026 por Matthew Conroy y Jack Galilee, de Cloudflare, y Henry Aspegren y James Balfour, de OpenAI, cierra la primera fase de un piloto de investigación que ambas compañías presentaron en julio. Su planteamiento parte de un problema conocido en SEO: muchas páginas útiles, como el manual de un modelo concreto o la carta actualizada de un restaurante, tienen pocos enlaces y tardan en ser descubiertas. Cloudflare, que se sitúa delante de una parte enorme de la web, ve qué URL reciben tráfico y cuándo cambian, y esa información es la que ahora pone a disposición del buscador de ChatGPT.
Cómo funciona: descubrimiento, cambios y filtrado
Según el blog de Cloudflare, el sistema aporta tres tipos de señales. La primera es el descubrimiento: la red de Cloudflare ayuda al rastreador de búsqueda de OpenAI a encontrar páginas útiles que no conocía. OpenAI evalúa después de forma independiente esas páginas y decide cómo aparecen en función de su relevancia, así que descubrir una URL no garantiza que se indexe ni que se cite.
La segunda son las señales de cambio, que indican cuándo merece la pena volver a visitar una página y cuándo no. La tercera es el filtrado previo. Cloudflare explica que el tráfico automatizado puede hacer que una página inexistente parezca interesante: bots que piden una y otra vez archivos que no existen, sitios que redirigen casi cualquier dirección a la portada o direcciones que llevan a copias del mismo contenido. Detectar esos patrones antes de rastrear evita peticiones inútiles. La empresa también está probando señales para marcar páginas concretas potencialmente dañinas, como un formulario de acceso falso colocado por un atacante, sin penalizar al dominio entero.
El efecto se parece al de protocolos de notificación como IndexNow, que avisan a los buscadores de que una URL es nueva o ha cambiado, con una diferencia importante: el aviso lo genera Cloudflare a partir de lo que observa en su red, sin que la web tenga que enviarlo. Cloudflare reconoce además un matiz que conviene no pasar por alto. Encontrar páginas nuevas puede aumentar el rastreo al principio, mientras se evalúan e indexan. El ahorro de carga llega después, cuando el rastreador deja de pedir páginas que no han cambiado o que no existen.
Qué se comparte y qué control mantiene cada web
Cloudflare insiste en que la investigación usa metadatos sobre la web para búsqueda y descubrimiento, no el contenido de las páginas para entrenar modelos, y en que una señal sobre una página no da permiso para acceder a ella. Para gestionar cómo acceden los sistemas de IA a cada sitio remite a su herramienta AI Crawl Control. Por el lado de OpenAI, su documentación indica que el rastreador de búsqueda de ChatGPT es OAI-SearchBot, que respeta robots.txt y que se controla por separado de GPTBot, el que recoge contenido para entrenar modelos. Bloquear OAI-SearchBot hace que una web no aparezca en las respuestas de búsqueda de ChatGPT, aunque todavía puede mostrarse como enlace de navegación.
Lo que el anuncio no aclara es cómo se eligió el 1 % de la red que participó en el piloto ni si la inclusión de las webs será voluntaria cuando el sistema se amplíe. Tampoco ofrece datos de clics ni de tráfico enviado desde ChatGPT a las páginas descubiertas. Cloudflare se limita a decir que la siguiente fase mejorará la selección de páginas, probará señales de cambio más rápidas y medirá qué ocurre después del descubrimiento, y que trabaja con OpenAI para traducirlo en resultados de negocio.
El movimiento llama la atención por el historial reciente de Cloudflare, que en el último año ha reforzado las herramientas para que las webs controlen o bloqueen a los bots de IA. Ahora, en lugar de levantar barreras, ayuda a un buscador de IA a llegar a más contenido. Cuando anunció el piloto en julio, el consejero delegado de Cloudflare, Matthew Prince, lo presentó como una forma de hacer la búsqueda con IA más eficiente.
Qué puede hacer un SEO a partir de ahora
Las webs que más pueden notar este tipo de descubrimiento son las que tienen muchas URL profundas con pocos enlaces internos o externos: fichas de producto de tiendas grandes, páginas de ayuda, documentación técnica o listados con filtros. Si están detrás de Cloudflare y el sistema se amplía, podrían entrar en el índice de ChatGPT aunque no figuren en el sitemap. Eso no sustituye a una buena arquitectura de enlaces ni a un sitemap limpio, que siguen siendo las señales que controla la propia web.
- Revisar los logs. Conviene vigilar qué URL pide OAI-SearchBot y con qué frecuencia, y comprobar que las peticiones son reales, como explicamos en cómo verificar si GPTBot y PerplexityBot son realmente bots de IA.
- Revisar robots.txt. Si una web bloquea OAI-SearchBot, ninguna señal de Cloudflare hará que aparezca en las respuestas de búsqueda de ChatGPT. Y si solo quiere evitar el entrenamiento, el que hay que bloquear es GPTBot.
- Limpiar errores y duplicados. Los 404 masivos, las redirecciones de todo a la portada y el contenido duplicado son justo lo que Cloudflare intenta filtrar. Corregirlos ayuda con cualquier rastreador.
- Medir la visibilidad en ChatGPT. Sin datos de clics publicados, la única forma de saber si hay impacto es medir el tráfico referido desde ChatGPT y las citas de la marca. En SEOcretos ya contamos que ChatGPT rastrea más la web desde GPT-5.
Preguntas frecuentes
¿ChatGPT indexará todas las URL que vea Cloudflare?
No. Cloudflare aporta señales para descubrir páginas, pero OpenAI evalúa de forma independiente cuáles indexa y cómo las muestra según su relevancia.
¿Cloudflare comparte el contenido de mi web con OpenAI?
Según Cloudflare, el piloto usa metadatos sobre la web para búsqueda y descubrimiento, no el contenido de las páginas para entrenar modelos.
¿Puedo impedir que ChatGPT rastree mi web?
Sí. OpenAI indica que su rastreador de búsqueda, OAI-SearchBot, respeta robots.txt, y Cloudflare ofrece AI Crawl Control para gestionar el acceso de los bots de IA.
¿Está disponible para todas las webs con Cloudflare?
Todavía no. Es un piloto con alrededor del 1 % de la red de Cloudflare y las compañías no han dado fechas ni condiciones para ampliarlo.
Fuentes: