User-Agent de robots · crawlers SEO

Voici les User-Agent représentatifs utilisés dans les requêtes réelles par les robots · crawlers appartenant à la catégorie SEO.

AhrefsBot	`Mozilla/5.0 (compatible; AhrefsBot/7.0; +http://ahrefs.com/robot/)`
SemrushBot	`Mozilla/5.0 (compatible; SemrushBot/7~bl; +http://www.semrush.com/bot.html)`

Les User-Agent de robots peuvent changer avec le temps et peuvent aussi être falsifiés. Pour le contrôle d'accès, ne vous fiez pas uniquement à la chaîne UA : combinez-la avec une résolution DNS inverse ou une vérification des plages d'IP officielles.