seoscanBot
seoscanBot est le robot de seoscan.fr. Il visite un site uniquement lorsque son propriétaire, ou une personne qui s'y intéresse, en demande l'analyse, puis pour les contrôles de suivi des abonnés.
Ce qu'il fait
- Il lit la page d'accueil, le fichier robots.txt, le sitemap et un échantillon limité de pages.
- Il respecte les règles de robots.txt qui le concernent (jeton
seoscanBot, ou*à défaut). - Il limite son rythme : deux à trois requêtes simultanées au plus par site, avec des délais d'attente courts.
- Il ne remplit aucun formulaire, ne se connecte à aucun compte et n'exécute aucune action.
L'identifier
Son User-Agent contient seoscanBot/1.0 (+https://seoscan.fr/robot).
Le bloquer
Ajoutez ces lignes à votre robots.txt :
User-agent: seoscanBot Disallow: /