Generador de robots.txt

Genere un archivo robots.txt para su sitio web con preajustes y reglas personalizadas.

Preajustes

Reglas personalizadas

Agente de usuario

Directiva

Ruta

URL del Sitemap

Crawl-delay (segundos)

Retraso entre cada solicitud del robot (no soportado por Google)

Vista previa del archivo robots.txt

User-agent: *
Allow: /

Otras herramientas que podrían gustarte