Comprobador de rastreadores de IA

Introduce tu URL. Leemos tu robots.txt y tu llms.txt y te mostramos si cada rastreador de IA tiene acceso.

Por qué importan los rastreadores de IA

ChatGPT, Perplexity y Google AI Overviews solo pueden citarte si sus rastreadores pueden leer tus páginas. Muchas webs los bloquean sin saberlo: un plugin de seguridad antiguo, un ajuste del CDN o una regla que alguien añadió contra los «scrapers».

Entrenamiento o búsqueda

No todos los rastreadores hacen lo mismo. GPTBot y Google-Extended recopilan datos para entrenar; OAI-SearchBot, PerplexityBot y Claude-SearchBot recuperan páginas para responder en directo. Si solo permites los de búsqueda, sigues siendo citable sin contribuir al entrenamiento.

Cómo permitir un rastreador

Añade en robots.txt un bloque con «User-agent:» seguido del nombre del rastreador y «Allow: /». Después revisa también tu firewall o CDN: desde 2025, Cloudflare bloquea por defecto los bots de IA en los dominios nuevos.

¿Qué es llms.txt?

llms.txt es un archivo de texto sencillo en la raíz de tu web que explica a los modelos de lenguaje qué haces y qué páginas son las más importantes. No es un estándar oficial, pero se crea en minutos y ayuda a los sistemas de IA a entender tu web más rápido.

Preguntas frecuentes