Générateur de robots.txt — gratuit en ligne
Les moteurs de recherche cherchent sur votre site un petit fichier appelé robots.txt pour savoir quelles pages ils peuvent visiter. L'écrire à la main est pénible, et une seule ligne fausse peut cacher tout votre site ou laisser les robots entrer sur des pages que vous vouliez garder à part. Nous avons ajouté un outil gratuit qui le fait pour vous — Robots.txt Generator — directement dans votre navigateur.
Ce qu'il fait
Vous construisez un robots.txt valide sans devoir retenir la formulation exacte. Partez d'un modèle prêt à l'emploi ou définissez vos propres règles pour chaque robot : dites ce qu'il faut autoriser et ce qu'il faut bloquer. Le fichier ressort propre et bien formaté, prêt à être déposé sur votre site.
Rien ne quitte votre appareil
Tout fonctionne dans votre navigateur. Vos règles et le fichier que vous créez ne sont jamais envoyés ni enregistrés sur un serveur. Vous fermez l'onglet et il ne reste rien.
Comment l'utiliser
- Ouvrez Robots.txt Generator et choisissez un modèle, ou partez de zéro.
- Ajoutez vos règles : pour chaque robot, choisissez ce qu'il faut autoriser ou bloquer.
- Copiez le résultat ou téléchargez le robots.txt et placez-le à la racine de votre site.
C'est gratuit et sans limite. Vous trouverez d'autres petits outils sur la page Apps.