Herramienta gratis
Robots.txt checker gratis para IA
Pega tu URL y mira al instante qué crawlers de IA pueden acceder a tu sitio. Leemos tu robots.txt en vivo y verificamos más de 15 bots (GPTBot, ClaudeBot, PerplexityBot y más) para que sepas si estás bloqueando tráfico de IA por accidente.
Analiza tu robots.txt
- 100% gratis
- Sin registro
- Resultados instantáneos
Por qué importan los bots de IA
El acceso de crawlers en robots.txt es la primera puerta para casos de uso de entrenamiento y recuperación.
GPTBot y ChatGPT
Los crawlers de OpenAI (incluyendo GPTBot y agentes relacionados) recopilan páginas públicas para la navegación de ChatGPT y usos relacionados con el modelo. Si están bloqueados, es menos probable que ChatGPT use tu sitio como fuente.
ClaudeBot
Anthropic usa ClaudeBot y Anthropic-AI para obtener contenido web para Claude. Tu robots.txt es la primera puerta para decidir si esos agentes pueden acceder a tus páginas.
PerplexityBot
PerplexityBot impulsa las respuestas en vivo y las citas de Perplexity. Bloquearlo puede sacarte de esos paneles de respuesta, a veces a propósito, a veces por accidente junto con una regla amplia de User-agent: * .
Cada bot sigue su propio grupo de User-agent cuando tu archivo lo tiene. Un bot sin grupo propio sigue el grupo *, y lo marcamos como "por *". Las líneas User-agent consecutivas comparten un mismo grupo, y gana la regla Allow o Disallow coincidente más larga, como indica el RFC 9309.
Siguiente paso
Audita el resto de tu configuración técnicarobots.txt es una señal. La auditoría completa cubre datos estructurados, renderizado y Core Web Vitals para crawlers de IA.
Pasa de una foto puntual a visibilidad en IA permanente
La herramienta gratis es un punto de partida rápido y honesto. Rank Prompt lo convierte en un programa que monitorea, compara y mejora cómo la IA habla de ti.
Ahora mismo
Este verificador gratis
- Verifica más de 15 crawlers de IA en tu robots.txt
- Lectura en vivo, sin registro
- Una lectura puntual, no monitoreo
El panorama completo
Plataforma de Rank Prompt
- Monitorea tu visibilidad en ChatGPT, Gemini, Perplexity, Claude, Grok y Google AI Mode (AI Overviews)
- Corre todo tu set de prompts de forma programada, no una sola consulta, una vez
- Share of voice frente a la competencia y evolución del ranking en el tiempo
- Alertas cuando ganas o pierdes terreno, más reportes exportables
- Contenido optimizado para IA, auditorías SEO e insights de citas
Preguntas frecuentes
Preguntas frecuentes del verificador de bots de IA en Robots.txt
¿Todavía tienes preguntas? Escríbenos
¿Qué son los bots de IA y por qué rastrean mi sitio web?
Los bots de IA (como GPTBot, ClaudeBot y PerplexityBot) son crawlers automatizados que envían las empresas de IA para indexar contenido web. Estos datos ayudan a entrenar modelos de IA y a dar respuestas en tiempo real. Si tu robots.txt bloquea estos bots, los asistentes de IA podrían no poder referenciar ni recomendar tu contenido cuando los usuarios hagan preguntas relevantes.
¿Qué bots de IA debería permitir en mi robots.txt?
Como mínimo, permite GPTBot (ChatGPT), ClaudeBot (Claude de Anthropic), PerplexityBot y Google-Extended (Gemini). Estos cubren las principales plataformas de IA donde los compradores descubren marcas. Bloquearlos significa que tu contenido no se incluirá en las recomendaciones generadas por IA, que cada vez más es donde empiezan las decisiones de compra.
¿Cómo desbloqueo los bots de IA en mi robots.txt?
Abre tu archivo robots.txt (normalmente en yourbrand.com/robots.txt) y elimina cualquier regla Disallow para los user agents de bots de IA. Por ejemplo, si ves "User-agent: GPTBot / Disallow: /", cambia la línea Disallow a "Allow: /" o elimina el bloqueo por completo. Si el bot no aparece mencionado, sigue tu grupo User-agent: *, y si no hay grupo * puede rastrear todo.
¿Permitir bots de IA afectará el rendimiento o la seguridad de mi sitio?
No. Los bots de IA se comportan de forma similar a los crawlers de buscadores como Googlebot. Leen tus páginas públicas pero no modifican nada. Su frecuencia de rastreo suele ser baja y no afecta el rendimiento del servidor. Permitirlos simplemente asegura que tu contenido pueda ser referenciado cuando los asistentes de IA respondan preguntas relevantes.
¿Qué significan "por *" y "sin regla" en los resultados?
"Permitido por *" o "Bloqueado por *" significa que tu robots.txt no tiene un grupo para ese bot, así que sigue tu grupo User-agent: *, como hacen los crawlers que respetan el RFC 9309. "Permitido, sin regla" significa que no hay ni un grupo para el bot ni un grupo *, así que nada le impide rastrear. Un bot con grupo propio ignora por completo el grupo *, así que repite cualquier línea Disallow compartida dentro de cada grupo con nombre.
¿Que un bot esté permitido significa que los crawlers de IA visitan mi sitio?
No. robots.txt solo dice quién puede rastrear. Para ver quién lo hizo, sube el log de acceso de tu servidor a Rank Prompt: cuenta las visitas de cada crawler de IA, las comprueba contra los rangos de IP que publica la empresa del crawler y lista las páginas que leen y los errores que encuentran. La guía de logs de crawlers de IA explica cómo exportar el log.
Ve más allá de una verificación puntual de robots
Monitorea la visibilidad en IA en el tiempo, compárate con la competencia y actúa con recomendaciones claras, no solo un archivo estático único.