Fonctionnalités
Better Robots.txt est organisé par domaines de contrôle concrets, pas comme un simple éditeur de fichier brut.
Visibilité des moteurs de recherche
Choisissez un niveau de visibilité ou un contrôle plus avancé pour décider jusqu’où exposer le site aux moteurs de recherche.
Gouvernance IA & LLM
Définissez comment traiter les bots d’entraînement IA et les systèmes de recherche IA. Vous pouvez aussi publier une guidance machine-readable comme llms.txt.
Protection contre les outils SEO
Limitez les crawlers d’outils comme Semrush, DotBot, Ahrefs et autres agents similaires lorsque le plan le permet.
Protection contre les mauvais robots
Activez une blocklist organisée, avec une version plus large dans les éditions supérieures.
Contrôle de l’archivage et de Wayback
Choisissez si des services d’archives peuvent stocker des copies publiques du site.
Spam, flux et pièges d’exploration
Réduisez le crawl de faible valeur sur les flux, la recherche interne, les paramètres de spam et les pièges.
Nettoyage WooCommerce
Évitez que le panier, la commande, le compte, ou des paramètres dynamiques inutiles consomment le budget de crawl.
Ressources et fichiers
Décidez si CSS, JavaScript et images doivent recevoir des règles Allow explicites.
Robots des réseaux sociaux
Autorisez ou limitez les bots de prévisualisation selon vos besoins de partage.
Publicités et revenus
Gardez ads.txt et app-ads.txt accessibles quand vous en avez besoin.
Review & Save
Prévisualisez la sortie générée avant de la publier.
Éditions
Certaines fonctionnalités sont disponibles partout, d’autres sont réservées aux plans Pro ou Premium. Utilisez la page tarifs pour comparer clairement Gratuit, Pro et Premium : Comparer les plans