Catégorisez les robots d’exploration, les bots de recherche et le trafic automatisé.
WebmasterID sépare le trafic des bots du trafic humain dès l’ingestion. Le tableau de bord fait apparaître les robots d’exploration d’IA, ceux des moteurs de recherche et les outils d’automatisation — chacun avec horodatage, fréquence et détail par site. Rien n’est inventé : un bot non catégorisé le reste.
Taxonomie fermée, classification déterministe.
Chaque visite de bot atterrit dans l’une des quatre catégories. La catégorie « non catégorisé » est rapportée telle quelle : un bot inconnu n’est jamais étiqueté « probablement IA ».
Robots d’exploration d’IA
GPTBot, ClaudeBot, PerplexityBot, Google-Extended, anthropic-ai, OAI-SearchBot et surfaces similaires. Visibles dans le tableau de bord, avec horodatage et fréquence.
Robots des moteurs de recherche
Googlebot, Bingbot, DuckDuckBot et autres indexeurs. Séparés des robots d’exploration d’IA, pour que le SEO et la visibilité dans l’IA restent découplés.
Outils d’automatisation
Navigateurs sans interface, agents de supervision et automatisations bénignes. Rangés dans « automatisation » plutôt que pris à tort pour des humains.
Non catégorisé
Lorsque la signature de la requête ne correspond à aucun motif connu, le bot apparaît sous « autre ». Rien n’est inventé : nous rapportons ce que nous observons.
La vue éclaire des décisions de SEO, d’infrastructure et de visibilité dans l’IA : repérer le premier passage de GPTBot ou de ClaudeBot sur un site, puis vérifier le trafic issu de l’IA qui en découle ; détecter les pics d’automatisation qui gonfleraient les statistiques s’ils étaient regroupés avec les humains ; recouper la fréquence des bots de recherche avec la couverture d’indexation dans la Search Console ; et voir si les robots d’exploration d’IA respectent — ou ignorent — votre politique llms.txt.
La catégorie « autre » est honnête
Si un robot d’exploration ne s’identifie pas, il atterrit dans « autre ». Aucune catégorisation d’IA n’est fabriquée à partir de signaux indirects, et un bot inconnu n’est jamais présenté comme probablement lié à l’IA.
Questions fréquentes
- Comment WebmasterID sépare-t-il les bots des humains ?
- Par une comparaison de règles côté serveur avec une liste maintenue de signatures de bots. Le traceur émet un événement normalisé ; la couche d’ingestion le classe de façon déterministe. Humains et bots sont stockés séparément, pour que les tableaux de bord ne les mélangent jamais.
- Stockez-vous le user-agent de la requête ?
- Non. Nous en extrayons le signal de catégorie du bot et écartons la valeur brute. Le tableau de bord n’affiche jamais la signature de requête sous-jacente.
- Et les bots de recherche par IA qui ne s’annoncent pas ?
- Si un robot d’exploration ne s’identifie pas, il atterrit dans « autre ». Nous ne fabriquons pas une catégorisation d’IA à partir de signaux indirects. La catégorie « autre » est honnête.
- Le trafic des bots compte-t-il dans les totaux analytiques ?
- Non. Les pages vues et les événements de conversion sont filtrés sur le trafic humain par défaut. Les visites de bots apparaissent dans la vue d’analyse des bots, et sur la page de visibilité dans l’IA lorsque le robot d’exploration est une surface d’IA.