En un mundo digital donde la información es abundante, la capacidad de las inteligencias artificiales para descubrir y procesar contenido relevante se vuelve crucial. La optimización de tu presencia en línea para la IA es fundamental, pero de poco sirve si los sistemas de IA no pueden hallar tu contenido. Piensa en esa guía de instalación que te tomó semanas desarrollar o un testimonio detallado de un producto, información que podría ser la clave para una decisión de compra.

A medida que más personas recurren a la IA para obtener ayuda, es esencial que estos sistemas encuentren tu trabajo, lo representen con precisión y dirijan a los usuarios interesados hacia tu sitio. Además, el control sobre cómo se accede a tu sitio es un aspecto que no debes pasar por alto.

Un proyecto piloto innovador

Con estos intereses en mente, Cloudflare y OpenAI lanzaron un proyecto piloto de investigación en julio de 2026. El objetivo principal era determinar si las señales de la red de Cloudflare podrían facilitar a los usuarios de ChatGPT el descubrimiento de nuevo contenido de manera más eficiente.

Los resultados iniciales son contundentes: la respuesta es un rotundo sí. Este piloto ha permitido indexar en OpenAI páginas que antes eran desconocidas, proporcionando a ChatGPT una base de fuentes más amplia para ayudar a los usuarios a encontrar información relevante y oportuna. Durante este proceso, se han obtenido valiosos aprendizajes sobre qué hace que una página sea digna de ser descubierta y cómo los sistemas de IA interactúan con la web.

La visibilidad en la web ha evolucionado. Ya no se trata solo de aparecer en los primeros resultados de búsqueda; ahora, los sistemas de IA deben encontrar las fuentes adecuadas, comprender su utilidad y conectar a las personas con la información pertinente.

Más contenido y respuestas útiles

La web es un vasto repositorio de detalles específicos. Desde manuales de lavadoras hasta requisitos de pasaporte o menús de restaurantes actualizados, la precisión en la búsqueda de la página correcta puede marcar la diferencia entre una respuesta incorrecta y una solución efectiva. Muchas de estas páginas son valiosas, aunque pocos sitios externos las enlacen.

La red de Cloudflare genera señales que asisten al rastreador de búsqueda de OpenAI para localizar más páginas útiles en la web, haciéndolas accesibles para los usuarios de ChatGPT. Posteriormente, OpenAI evalúa y clasifica estas páginas de forma independiente, basándose en su relevancia y utilidad. Esta colaboración crea un ciclo de retroalimentación que mejora tanto el descubrimiento de contenidos como la calidad de la información encontrada.

Este proyecto piloto conjunto, que utilizó aproximadamente el 1% de la red global de Cloudflare, ha posibilitado que OpenAI descubra e indexe cientos de millones de nuevas páginas web. Esto se traduce en que los usuarios pueden encontrar contenido más útil y obtener respuestas a un mayor número de preguntas a través de ChatGPT. Además, al enlazar a fuentes relevantes, ChatGPT Search ofrece a los usuarios la posibilidad de explorar el contenido original y conocer a los sitios web y editores detrás de la información.

Con avances futuros como GPT-6 e Intelligent UI, OpenAI busca hacer de ChatGPT una plataforma aún más robusta para comprar, aprender y encontrar respuestas, con experiencias más visuales e interactivas adaptadas a las necesidades de cada usuario. Este trabajo complementa dichos avances al asegurar que ChatGPT acceda a información más útil y actualizada de toda la web.

De encontrar a filtrar: la eficiencia del rastreo

Encontrar una URL es solo el primer paso. Es crucial determinar si el enlace lleva a una página accesible, si ofrece contenido único y cómo puede beneficiar al usuario. Por ejemplo, hemos observado cómo el tráfico automatizado puede hacer que una página inexistente parezca relevante, o cómo algunos sitios redirigen casi cualquier dirección a su página de inicio, o cómo múltiples direcciones llevan al mismo contenido.

Reconocer estos patrones nos permite reducir el trabajo innecesario antes de que un rastreador acceda a la página, mejorando la eficiencia para los propietarios de los sitios. También estamos probando señales para identificar y marcar páginas potencialmente peligrosas, lo que añade una capa de seguridad y fiabilidad al proceso de descubrimiento. Marcar solo una página comprometida en un sitio legítimo, en lugar de todo el dominio, protege a los usuarios sin penalizar al propietario del sitio. Los resultados iniciales sugieren que estas señales son efectivas para identificar páginas que deberían excluirse del índice.

Facilitando el descubrimiento de contenido

A medida que más personas utilizan la IA para buscar información, los propietarios de sitios web tienen nuevas oportunidades de conectar con audiencias interesadas. Para quienes deciden hacer su contenido accesible a los sistemas de IA, estas mejoras facilitan y hacen más eficiente el descubrimiento.

Mantener el ritmo rastreando cada página con mayor frecuencia sería costoso para todos. Para un propietario de sitio web, un rastreador que descarga repetidamente una página sin cambios representa una carga adicional sin beneficio. Las señales que estamos desarrollando evitan esto. El filtrado mantiene a los rastreadores alejados de páginas inexistentes o redirigidas, y las señales de cambio les indican cuándo una página merece ser revisitada y cuándo no.

El objetivo es equilibrar el descubrimiento de nuevo contenido y la actualización de la información existente sin malgastar recursos. Para los clientes de Cloudflare, esto significa una carga innecesaria reducida. Para OpenAI, implica dedicar más recursos de búsqueda a información que realmente ayuda a las personas.

Participación valiosa y control

La próxima fase se centrará en refinar la selección de páginas, probar señales de cambio más rápidas y fiables, y medir el impacto del contenido una vez descubierto. Continuaremos colaborando estrechamente con OpenAI para comprender cómo una mejor visibilidad de las páginas web puede traducirse en resultados empresariales concretos, y compartiremos nuestros hallazgos futuros.

Las decisiones de los propietarios de dominios son primordiales. Una señal sobre una página no otorga permiso para acceder a su contenido. En este proyecto de investigación, utilizamos metadatos de Internet para mejorar la búsqueda y la localización de contenidos, pero los contenidos reales de las páginas web no se comparten para el entrenamiento de modelos de IA.

Puedes utilizar AI Crawl Control de Cloudflare para entender y gestionar cómo los sistemas de IA acceden a tu sitio web, manteniendo el control sobre tu información.