Crawlers de réseaux sociaux

Emplacement : Étape 10, Crawlers de réseaux sociaux.

Cette étape contrôle si les crawlers d’aperçu des réseaux sociaux, les bots qui génèrent la carte d’aperçu de lien quand une page est partagée sur une plateforme sociale, peuvent récupérer le site.

Ce que cette étape contrôle

Une bascule :

• Block Social Media Crawlers : active pour interdire les récupérateurs d’aperçus sociaux. Laissez désactivée pour les laisser fonctionner normalement.

Quand activée, l’extension émet des directives Disallow sous les user-agents pertinents (la famille qui inclut les récupérateurs d’aperçus des grandes plateformes sociales).

Comment décider

Laissez la bascule désactivée si :

• les pages sont régulièrement partagées sur les plateformes sociales ;
• avoir une image, un titre et une description corrects dans l’aperçu de lien compte pour le trafic ;
• l’équipe marketing ou éditoriale s’attend à ce que les aperçus sociaux soient soignés.

Activez la bascule si :

• le site est volontairement privé ou non promu sur les plateformes sociales ;
• les aperçus de lien sont considérés comme un cache secondaire non désiré du contenu ;
• une posture plus stricte contre les crawlers d’aperçu fait partie d’une approche protection plus large.

Ce que cette étape ne fait pas

Cette étape :

• n’empêche pas les utilisateurs de partager l’URL sur les plateformes. Le lien est partageable de toute façon, seul l’enrichissement de l’aperçu est affecté ;
• ne bloque pas les autres chemins de crawl des mêmes plateformes (publicités, analytique, etc.) ;
• ne garantit pas l’absence d’aperçu si la plateforme a déjà mis en cache un fetch précédent réussi.

Offre concernée

Cette bascule est disponible sur toutes les offres.

À lire avec

• Ressources et fichiers : les images Open Graph doivent rester récupérables pour que les aperçus fonctionnent.
• Taxonomie des bots