Better Robots.txt La manière la plus simple & la plus facile de booster l'indexation et le référencement de votre site Web.

100% compatible avec

En optimisant le robots.txt, vous informez précisément les robots d’indexation quant à la manière d’explorer votre site et d’indexer son contenu, ce qui en fait un fichier particulièrement utile et nécessaire dans un contexte d’optimisation (SEO).

Better Robots.txt

UNIQUE Better robots.txt a été conçu pour résoudre une lacune récurrente liée aux capacités d'indexation de la plupart des sites WordPress. Aucun autre plugin n'avait encore jamais allié un telle synergie dans le robots.txt.

Better Robots.txt

VALEUR AJOUTÉE Better-Robots.txt vous garantit que votre site web, peu importe son contenu (et la qualité de celui-ci) sera bel et bien indexé par les moteurs de recherche, pour que vous puissiez profiter au maximum de votre contenu.

Better Robots.txt

CENTRÉ SUR VOS BESOINS Nous avons conçu ce plugin pour qu'il soit à la fois efficace et user-friendly à utiliser. Vous n'avez besoin d'aucune connaissance particulière pour en maîtriser toute la finesse et la puissance.

PREMIÈRE ÉTAPE: voyons si vous avez un robots.txt et ce qu'il contient. Entrez (collez) l'URL de votre site Web ci-dessous. Cliquez ensuite sur SUBMIT/ENVOYER. Nous détecterons tout d'abord si votre site contient un robots.txt et quel est son contenu.

Vous n'avez aucun fichier Robots.txt (une erreur 404) ?

Vous avez un problème ! Better Robots.txt peut vous aider en vous créant votre fichier robots.txt.

Vous voyez ces 2 lignes ?

Better Robots.txt

Super ! Toutefois, ceci est le squelette de base de ce à quoi devrait ressembler un Robots.txt. Better Robots.txt peut vous aider à l’optimiser.

Saviez-vous que ... Le fichier robots.txt est un simple fichier se trouvant à la racine du site, sur le serveur d'hébergement, servant à identifier quel robot d'indexation (comme Googlebot) peut ou pas accéder à votre site et l'indexer.

  • Le fichier robots.txt contrôle la façon dont les moteurs de recherche voient et interagissent avec vos pages Web;
  • Ce fichier, et les robots avec lesquels il interagit, sont des éléments fondamentaux du fonctionnement des moteurs de recherche;
  • La toute première chose qu’un robot d’exploration de moteur de recherche regarde quand il visite une page est le fichier robots.txt;
  • Le fichier robots.txt est une source de PURE jus SEO qui ne demande qu’à être débloqué.

COMMENT OPTIMISER VOTRE ROBOTS.TXT?

Entrepreneurs, blogueurs, ... Quoi que vous fassiez avec votre site WordPress, ce plugin est un ``MUST HAVE``.

Trafic Google à partir d’un site optimisé récemment avec Better Robots.txt.

1. Boostez votre site avec votre sitemap! Assurez-vous que vos pages, vos articles et produits, même les plus récents, soient pris en considération par les moteurs de recherche!

Le plugin Better Robots.txt a été conçu pour fonctionner en parfaite harmonie avec le plugin Yoast SEO (probablement LE meilleur plugin SEO pour sites WordPress). Il permet en effet de détecter si vous utilisez effectivement Yoast SEO et si la fonctionnalité permettant de générer des sitemaps est activée. Si oui, alors il ajoutera automatiquement une instruction dans le fichier Robots.txt demandant aux robots d’exploration de lire en tout temps l’index de sitemap (contenant toutes les sitemaps du site) afin de vérifier si vous avez des modifications récentes sur votre site Web (vos pages, articles, produits), afin qu’ils puissent indexer le nouveau contenu.

Si vous souhaitez ajouter votre propre sitemap (ou si vous utilisez un autre plugin SEO autre que YOAST), il vous suffit de copier-coller l’URL de la sitemap dans le champ disponible et Better Robots.txt l’ajoutera en bonne et due forme à votre fichier Robots.txt.

Better Robots.txt

Du plugin Better Robots.txt PRO

Du plugin Better Robots.txt PRO

2. Boostez l'indexation de votre site Web. Faites indexer votre site Web auprès des moteurs de recherche !

Nous avons identifié une liste (non exhaustive) des moteurs de recherche les plus populaires (qui sera mise à jour et améliorée à chaque nouvelle version). À chaque fois que vous sélectionnez un robots d’indexation, Better Robots.txt ajoute un ligne d’instruction spécifique dans votre robots.txt. De cette manière (si vous aviez sélectionner « GoogleBot »):

Better Robots.txt

Il s’agit d’une instruction simple demandant à Google de lire et d’indexer votre site (à partir des règles de base créées par défaut).

Nous voulions quelque chose de simple et nous l’avons fait.

3. Protégez votre contenu de la copie! Empêchez les robots malveillants de collecter des données de votre site et de commercialiser vos informations.

Le plugin Better Robots.txt, entre autres fonctionnalités, permet d’un clic, d’injecter une trentaine d’instructions dans le robots.txt permettant de bloquer une liste de robots malveillants, les empêchant ainsi à la fois d’explorer votre site et de récupérer de vos données.

Dans le domaine de « tout ce qui peut explorer un site web », de manière autonome ou pas, il y a les « bons » robots et les « mauvais » robots. Les bons robots, comme GoogleBot par exemple, explorent votre site à des fins d’indexation pour les moteurs de recherche. Toutefois, d’autres robots explorent votre site pour des raisons plus obscures telles que la copie de votre contenu (texte, prix, …) à des fins de republication, le téléchargement d’archives entières ou même l’extraction de vos images à des fins commerciales (revente). Certains robots, très voraces, sont même responsables d’avoir littéralement « planté » des sites web (et serveurs) tellement l’exploration était brutale et bien au-delà de ce qui normalement autorisé.

Grâce à cette fonctionnalité (complètement automatisée), Better Robots.txt vise à protéger votre site Web contre une certain nombre de Robots d’exploration (scrapers), parmi les plus connus et identifiés comme malveillant par Distil Networks. Nous fournirons avec le temps (au fur et à mesure des mises à jour) une liste toujours plus complète et détaillée des robots malveillants bloqués par Better Robots.com.

Better Robots.txt

Du plugin Better Robots.txt PRO

Du plugin Better Robots.txt PRO

4. Cachez & protégez vos backlinks Empêchez vos compétiteurs d'identifier vos backlinks performants.

Les backlinks, également appelés « liens entrants » ou  » inbound links / incoming links « , sont créés lorsqu’un site web est relié à un autre. Le lien vers un site externe s’appelle un backlink. Les backlinks sont particulièrement précieux pour le SEO car ils représentent un « vote de confiance » d’un site à l’autre. En substance, les backlinks vers votre site Web sont un signal aux moteurs de recherche que les autres se portent garant de votre contenu.

Si de nombreux sites proposent un lien vers la même page Web ou le même site Web, les moteurs de recherche peuvent en déduire que le contenu mérite d’être lié et, par conséquent, qu’il vaut la peine d’apparaître dans les résultats de recherche (un lien de confiance et de cohérence avec votre contenu). Voilà pourquoi, l’obtention de ces backlinks génère un effet positif sur la position occupée par un site dans les moteurs de recherche (ranking). Dans l’industrie SEM, il est commun pour les spécialistes du milieu d’identifier d’où viennent ces backlinks (essentiellement de concurrents) afin de trier les meilleur d’entre eux (source + pagerank) et de générer à leur tour des backlinks de haute qualité pour leurs clients.

Considérant que la création de backlinks à haute valeur ajoutée, pour une entreprise, prend du temps (temps + énergie + budget), permettre à vos concurrents de les identifier et de les dupliquer si facilement est une pure perte d’efficacité.

Voilà pourquoi, Better Robots.txt vous aide à bloquer tous les crawlers SEO (aHref, Majestic, Semrush) pour garder vos backlinks indétectables.

Testez-le ou installez-le, mais faites quelques chose ! Ne prenez pas le risque d'avoir du contenu inutile sur votre site Web.

FREEMIUM

$ 0

Disponible en téléchargement sur WordPress
Permet l’ajout d’instruction pour 16 robots d’indexation
Permet l’ajout d’un « Crawl-delay » global

PREMIUM

$ 45

Disponible seulement sur Better-robots.com
Permet l’ajout d’instruction pour 16 robots d’indexation
Permet l’ajout d’un « Crawl-delay » global
Vérifie l’index de sitemap de Yoast SEO
Permet l’ajout de l’index Sitemap dans le robots.txt
Permet de bloquer plus de 30 robots malveillants (scrapers)

Les meilleures techniques d'optimisation SEO avec Better Robots.txt Apprenez-en plus à propos du robots.txt & des sitemaps.

Better Robots.txt

Gardez le rythme ! Informez-vous des dernières nouveautés à propos de Better Robots.txt.

Un support reconnu et apprécié pour optimiser votre robots.txt. Nous vous aiderons à résoudre vos problèmes d'indexation liés à WordPress grâce à notre plugin.

Better Robots.txt