Paramètres avancés

Emplacement : Étape 13 - Paramètres avancés

Il s’agit de l’étape experte pour la forme de sortie et les directives manuelles.

Contrôles disponibles

• Crawl Delay (seconds)
• Consolidate User-agents
• Custom Rules

Ce que font ces réglages

• Crawl Delay ajoute une valeur de délai pour les robots qui la respectent
• Custom Rules vous permet d’ajouter vos propres directives
• Consolidate User-agents regroupe les règles par User-agent

Notes sur les offres

• Crawl Delay est disponible sur Pro et Premium