Herramientas gratuitas

¿Su web deja entrar a la IA?

Indique el dominio. Leemos el robots.txt y le mostramos qué rastreadores de IA están permitidos o bloqueados, y si tiene sitemap y llms.txt.

Rastreadores comprobados

Qué rastreadores de IA comprobamos.

Bloquear los rastreadores de entrenamiento no saca la web de las respuestas. Bloquear los de búsqueda, sí.

Rastreador	Empresa	Para qué sirve
`GPTBot`	OpenAI	Entrenamiento de modelos
`OAI-SearchBot`	OpenAI	Búsqueda y respuestas con IA
`ChatGPT-User`	OpenAI	Visitas solicitadas por usuarios
`ClaudeBot`	Anthropic	Entrenamiento de modelos
`Claude-SearchBot`	Anthropic	Búsqueda y respuestas con IA
`Claude-User`	Anthropic	Visitas solicitadas por usuarios
`PerplexityBot`	Perplexity	Búsqueda y respuestas con IA
`Perplexity-User`	Perplexity	Visitas solicitadas por usuarios
`Googlebot`	Google	Búsqueda y respuestas con IA
`Google-Extended`	Google	Entrenamiento de modelos
`Bingbot`	Microsoft	Búsqueda y respuestas con IA
`Applebot-Extended`	Apple	Entrenamiento de modelos
`Amazonbot`	Amazon	Búsqueda y respuestas con IA
`meta-externalagent`	Meta	Entrenamiento de modelos
`CCBot`	Common Crawl	Entrenamiento de modelos
`Bytespider`	ByteDance	Entrenamiento de modelos

Entrenamiento, búsqueda y visitas: no son lo mismo

Cada empresa de IA usa varios rastreadores. Los de entrenamiento, como GPTBot, ClaudeBot y Google-Extended, recogen contenido para entrenar modelos. Los de búsqueda, como OAI-SearchBot, Claude-SearchBot y PerplexityBot, leen páginas para responder y citar fuentes. Los de usuario, como ChatGPT-User, abren una página cuando alguien se lo pide al asistente.

Para aparecer en las respuestas, lo esencial es no bloquear los rastreadores de búsqueda y de usuario, ni Googlebot y Bingbot, que alimentan las AI Overviews, Copilot y la búsqueda de ChatGPT. Bloquear solo los de entrenamiento es una decisión legítima y no suele reducir la presencia en las respuestas.

Cómo corregir un bloqueo

En el archivo robots.txt, en la raíz de la web, añada un grupo para el rastreador y una línea Allow: /. Por ejemplo: User-agent: OAI-SearchBot seguido de Allow: /. Compruebe también que su CDN o cortafuegos no bloquea estos rastreadores, porque ese bloqueo no aparece en el robots.txt.

Esta herramienta solo lee el robots.txt público y usa la página de inicio como ruta de prueba. No detecta bloqueos hechos por cortafuegos, CDN o el servidor.

Pruebe Neural Ranks

Descubra dónde está su marca en la búsqueda con IA.

7 días gratis, sin tarjeta. Su análisis, sus competidores y un ejemplo de plan de acción.