Votre site est-il bien gouverné face aux crawlers IA ?

Un audit en 30 secondes de votre robots.txt, llms.txt et de votre posture face à plus de 20 crawlers IA (GPTBot, ClaudeBot, Google-Extended, PerplexityBot et compagnie).

Si votre politique IA existe déjà sous un chemin personnalisé, indiquez son URL publique sur le même domaine ou son chemin, par exemple /ai-policy/.

Profil d’intention

Sélectionnez le profil d’intention qui définit l’angle de lecture de la gouvernance crawler. En cas d’hésitation, l’aide ci-dessous peut recommander un profil existant.

Aidez-moi à choisir mon profil d’intention Quatre questions peuvent recommander un profil existant avant l’audit.

Utilisez cette aide seulement si la liste des profils n’est pas assez claire. Elle présélectionne un profil existant, et vous pouvez encore modifier le choix final avant l’audit.

Voulez-vous que les moteurs de recherche classiques puissent explorer votre site ?
Voulez-vous déclarer une restriction contre l’entraînement IA sur votre contenu ?
Voulez-vous permettre les crawlers utilisés pour des réponses ou recherches IA, lorsque cela sert la découvrabilité ?
Quelle est votre priorité principale ?

Cette aide sélectionne seulement un profil existant. Elle ne crée pas de score personnalisé et ne prédit ni visibilité IA, ni classement, ni citation, ni conformité des crawlers.

Gratuit. Sans inscription. Les résultats complets sont mis en cache brièvement par domaine. Le score précédent est conservé jusqu’à 30 jours pour afficher la progression, plus des tentatives diagnostiques de courte durée pour la fiabilité. Les statistiques long terme sont agrégées et anonymisées.

Ce qu’on vérifie

1

Présence et validité

Le robots.txt est-il accessible ? La syntaxe est-elle valide ? Votre sitemap est-il référencé ?

2

Couverture des crawlers IA

GPTBot, ClaudeBot, Google-Extended, PerplexityBot et 16 autres sont-ils traités explicitement ?

3

Signaux IA modernes

llms.txt, ai-manifest.json, gouvernance .well-known/, politique d’usage IA, distinction entraînement / récupération.

4

Hygiène

Pas de Disallow: / accidentel, pas de directives obsolètes, pas de sur-ingénierie.

Vérifications de gouvernance versionnées, déterministes

La même entrée produit toujours le même score. Règles versionnées. Mises à jour trimestrielles selon l’évolution du paysage des crawlers IA.