Generador y probador de robots.txt
Crea un robots.txt a medida regla por regla y comprueba si una URL y un user-agent concretos quedarían permitidos o bloqueados, con el mismo criterio que documenta Google.
Cómo usar el generador y probador de robots.txt
Añade tus reglas
Indica qué user-agent, tipo (Allow/Disallow) y ruta quieres para cada regla. Añade tantas filas como necesites.
Descarga y sube el archivo
Descarga el robots.txt generado y súbelo a la raíz de tu dominio (debe quedar accesible en tudominio.com/robots.txt).
Prueba antes de publicar
Usa la sección de abajo para comprobar que una URL concreta queda permitida o bloqueada tal como querías, antes de subir el archivo de verdad.
Preguntas frecuentes sobre robots.txt
Dudas habituales al escribir o revisar un archivo robots.txt.
¿robots.txt impide que Google me indexe?
+
Bloquea el rastreo de esas rutas, pero no garantiza que no aparezcan indexadas si otra web enlaza a ellas. Para impedir la indexación de verdad, usa la etiqueta meta robots noindex en la propia página.
¿Qué pasa si no tengo robots.txt?
+
Los buscadores asumen que pueden rastrear todo el sitio. No es obligatorio tener uno, pero es una buena práctica para indicar dónde está tu sitemap y bloquear rutas que no aportan valor en buscadores (paneles internos, resultados de búsqueda interna...).
¿Por qué gana la regla más larga?
+
Es el criterio que documenta Google: cuando varias reglas coinciden con la misma URL, se aplica la más específica (la de ruta más larga), y solo en caso de empate exacto gana Allow sobre Disallow.
¿robots.txt sirve para ocultar información privada?
+
No. El archivo es público y cualquiera puede leerlo, así que nunca debe usarse para 'ocultar' rutas sensibles — de hecho, listarlas ahí puede llamar la atención sobre ellas. Para proteger contenido de verdad hace falta autenticación.
Webmasters
Auditoría de tu Web: DNS, Correo, SEO y Rendimiento
Comprueba en segundos, desde tu navegador, el DNS de cualquier dominio, si su correo está protegido con SPF, DKIM y DMARC, si expone subdominios sensibles, su SEO técnico (título, meta description, indexabilidad...) y cómo de rápido carga — con datos reales de Google PageSpeed Insights. Sin instalar nada, sin registrar tu web en ningún servidor.
Generador de SPF, DMARC y DKIM
Genera los registros TXT exactos para proteger tu correo: SPF con los proveedores que uses, DMARC con la política que elijas y, si quieres, un par de claves DKIM reales creadas en tu propio navegador.
Generador de sitemap.xml
Pega la lista de URLs de tu web y descarga un sitemap.xml listo para subir a tu servidor y enviar a Google Search Console.
Generador de meta tags y Open Graph
Rellena título, descripción e imagen y genera el bloque completo de etiquetas <head>: meta description, canonical, Open Graph y Twitter Card, listo para pegar.
Generador de datos estructurados (Schema.org / JSON-LD)
Genera el JSON-LD de FAQ, Producto, Artículo, Negocio local o Breadcrumb, listo para pegar en tu página y optar a resultados enriquecidos en Google.
Generador de reglas .htaccess
Marca lo que necesites (forzar HTTPS, unificar www, redirecciones 301, compresión, caché...) y genera el .htaccess listo para subir a la raíz de tu servidor Apache.
¿Cuál es mi IP?
Consulta tu dirección IP pública y el país desde el que te ves al instante, directamente desde el borde de red de Cloudflare — sin ningún servicio de terceros.
Comprobador de propagación DNS
Comprueba si un registro DNS ya se ve igual desde distintos resolvers públicos (Cloudflare y Google) — útil para saber si un cambio reciente ya se ha propagado o si solo hace falta esperar.
Generador de llms.txt
Crea el archivo llms.txt de tu web: un resumen en formato markdown pensado para que los modelos de lenguaje entiendan rápido de qué trata tu sitio.
