Robots.txt Generator

Créez un fichier robots.txt valide : règles par user-agent, sitemaps, crawl-delay, presets courants, aperçu en direct et validation instantanée.

Presets

Bloquer les crawlers IA (GPTBot, ClaudeBot, CCBot…)

Groupes de règles1

Groupe 1

User-agent

Disallow (1 chemin par ligne)

Allow (1 chemin par ligne)

Crawl-delay (secondes)

Commentaire (optionnel)

Sitemaps

Host (optionnel, Yandex)

Commentaire en en-tête (optionnel)

Aperçu

# robots.txt généré avec MyTools

# Règles générales
User-agent: *
Allow: /

1 groupe(s)1 Allow0 Disallow0 sitemap(s)6 lignes82 octets

Déposez ce fichier à la racine de votre domaine : https://votre-domaine.com/robots.txt