Comprobador de Robots.txt

Obtén y analiza el archivo robots.txt de cualquier sitio web. Ve reglas por agente de usuario, encuentra URLs de sitemap y prueba si una URL está bloqueada. Gratis, sin necesidad de cuenta.

Enter a domain without protocol (e.g., example.com). Fetched via CORS proxy.

About Robots.txt Checker

Analiza el archivo robots.txt de cualquier sitio web para entender cómo se instruye a los motores de búsqueda para rastrear el sitio. Extrae reglas por agente de usuario, encuentra referencias a sitemaps y prueba rutas de URL contra reglas de bloqueo. Todo en tu navegador.

Analiza robots.txt

Extrae todas las reglas de cualquier robots.txt: directivas de agente de usuario, reglas de Permitir/Bloquear, Crawl-delay y URLs de sitemap. Tablas estructuradas por agente.

Prueba URL contra reglas

Comprueba si una ruta de URL específica sería bloqueada por las reglas de robots.txt. Ve qué regla coincide y si la ruta está permitida o bloqueada.

Descubrimiento de sitemaps

Extrae automáticamente todas las directivas de Sitemap del archivo robots.txt. Nunca te pierdas una URL de sitemap al auditar la configuración SEO de un sitio.

Vista sin procesar y resumen

Ve el robots.txt completo sin procesar junto con estadísticas estructuradas: reglas totales, agentes de usuario encontrados y referencias a sitemaps. Copia el contenido sin procesar para análisis adicional.

📋 Common Use Cases

Configuración SEO a nivel de página

Genera conjuntos completos de metaetiquetas — título, descripción, Open Graph y Twitter Cards — para páginas nuevas o existentes que carecen de optimización.

Preparación para resultados enriquecidos

Crea marcado JSON-LD validado para artículos, productos, preguntas frecuentes y más. Califica para resultados enriquecidos que aumentan la tasa de clics en los resultados de búsqueda.

Auditoría técnica de todo el sitio

Comprueba la configuración de robots.txt, la estructura de sitemaps y el formato de URLs en todo tu sitio. Corrige problemas técnicos antes de que afecten el presupuesto de rastreo.

Migración de plataforma

Genera mapas de redirección, etiquetas canónicas y datos estructurados adecuados al migrar entre plataformas o reestructurar tu jerarquía de URLs.

🪜 How to Use This Tool

  1. Ingresa los detalles de la página o sitio
    Proporciona la URL, el contenido de la página o la configuración del sitio según la herramienta SEO específica.
  2. Configura los requisitos de salida
    Selecciona tipos de esquema, formatos de metaetiquetas o alcance de auditoría según tus necesidades.
  3. Genera o analiza
    Obtén metaetiquetas generadas, marcado de esquema validado o hallazgos de auditoría técnica con recomendaciones priorizadas.
  4. Implementa en tu sitio
    Copia el código generado en la sección de encabezado HTML, robots.txt o sitemap. Vuelve a auditar después de la implementación para confirmar las correcciones.

📚 Related Guides

Frequently Asked Questions

¿Estas herramientas SEO son gratuitas?▼
Sí. Todas las herramientas SEO son completamente gratuitas. No se requiere registro.
¿Las metaetiquetas funcionan para Google?▼
Sí. El generador de metaetiquetas crea etiquetas estándar Open Graph, Twitter Card y HTML que son reconocidas por Google, Facebook, Twitter y otras plataformas.
¿El marcado de esquema es válido?▼
Sí. El generador de esquema produce JSON-LD válido que sigue las especificaciones de Schema.org para Artículo, FAQ, Producto, NegocioLocal y otros tipos.