Validador de robots.txt
Errores de sintaxis, sitemap y qué bots pueden entrar: Google, Bing y los de IA (ChatGPT, Perplexity, Claude, Gemini), separando búsqueda de entrenamiento.
¿Quieres esto en todas las páginas, todos los días, con alerta cuando empeore? Haz la verificación gratis del sitio · Ver planes
Related guides
Bots de IA en robots.txt: búsqueda, acceso del usuario y entrenamiento
GPTBot, ClaudeBot, OAI-SearchBot, Google-Extended: qué hace cada robot de IA, si respeta el robots.txt y cómo bloquear el entrenamiento sin dejar la búsqueda.
Rastreo e indexación: robots.txt, sitemap y códigos de estado HTTP
Por qué Google no indexa una página: robots.txt, noindex, canónica, sitemap, estado HTTP, JavaScript y los motivos de Search Console, con checklist.
Socios
Beneficios de socios con un solo cupón.
WPLIGHT20% OFFVer la oferta de WP Rocket (abre en una pestaña nueva)
25% OFFVer la oferta de Perfmatters (abre en una pestaña nueva)
Enlaces de socios. Podemos recibir una comisión, sin costo adicional para ti.