Generatore Robots.txt

Crea un file robots.txt con regole allow/disallow per i crawler dei motori di ricerca.

Rule 1

User-agent

Percorsi consentiti (uno per riga)

Percorsi vietati (uno per riga)

URL sitemap (opzionale)

Output robots.txt

User-agent: *
Allow: /
Disallow: /admin
Disallow: /private

Comments & Feedback

Comments are powered by Giscus. Sign in with GitHub to leave a comment.