Générateur de robots.txt
Le générateur robots.txt permet de créer un fichier robots.txt complet avec règles personnalisées pour chaque robot d'indexation.
- 100% gratuit
- Sans pub
- Sans inscription
- Aucune collecte de données
Contenu robots.txt génère :
Comment générer un robots.txt ?
1
Ajoutez des règles
Ajoutez des directives Allow ou Disallow pour chaque User-agent.
2
Configurez les options
Ajoutez l'URL de votre sitemap et un delai de crawl si nécessaire.
3
Copiez et publiez
Copiez le contenu génère et publiez-le a la racine de votre site.
Besoin d'un veritable accompagnement web ?
3545 vous accompagne sur vos projets web, de la conception a la maintenance.