Connexion
Annuaire

Les robots d’IA qui visitent votre site.

Le rôle de chaque robot, faut-il le laisser entrer et comment le contrôler dans le robots.txt. Les robots de recherche décident si votre site peut apparaître et être cité dans les réponses de l’IA.

Vérifier mon robots.txt

Il existe trois types de robots d’IA. Les robots de recherche lisent les pages pour répondre et citer des sources. Les robots utilisateur ouvrent une page quand quelqu’un le demande à l’assistant. Les robots d’entraînement collectent du contenu pour entraîner des modèles. Pour apparaître dans les réponses, l’essentiel est de ne pas bloquer les deux premiers.

Recherche et réponses

OAI-SearchBotOpenAI · la recherche de ChatGPT : les pages que ChatGPT peut afficher et citer dans ses réponsesClaude-SearchBotAnthropic · la recherche de Claude : les pages que Claude peut utiliser et citer dans ses réponsesPerplexityBotPerplexity · l’index de recherche de Perplexity : les pages que Perplexity peut afficher et citerGooglebotGoogle · la recherche Google, y compris les AI Overviews et l’AI ModeBingbotMicrosoft · la recherche Bing, qui alimente aussi Microsoft Copilot et d’autres outils d’IAApplebotApple · la recherche d’Apple : Siri, Spotlight et suggestions de SafariAmazonbotAmazon · les services d’Amazon, y compris les réponses d’Alexa

Demandes d’utilisateurs

ChatGPT-UserOpenAI · les visites que ChatGPT fait sur une page quand un utilisateur le lui demandeClaude-UserAnthropic · les visites que Claude fait sur une page quand un utilisateur le lui demandePerplexity-UserPerplexity · les visites que Perplexity fait sur une page quand un utilisateur lui pose une questionMistralAI-UserMistral AI · les visites que Le Chat de Mistral AI fait sur une page quand un utilisateur le lui demande

Entraînement de modèles

GPTBotOpenAI · l’entraînement des modèles d’IA d’OpenAI (GPT)ClaudeBotAnthropic · l’entraînement des modèles d’IA d’Anthropic (Claude)Google-ExtendedGoogle · l’autorisation pour Google d’utiliser le contenu dans l’entraînement et les réponses de Gemini (ce n’est pas un robot distinct et cela n’affecte pas la recherche Google)Applebot-ExtendedApple · l’autorisation pour Apple d’utiliser le contenu pour entraîner les modèles d’Apple Intelligence (ce n’est pas un robot distinct)meta-externalagentMeta · l’entraînement des modèles d’IA de Meta et d’autres usages du contenu webCCBotCommon Crawl · Common Crawl, une archive publique du web utilisée pour entraîner de nombreux modèles d’IAcohere-aiCohere · les produits d’IA de CohereBytespiderByteDance · l’entraînement des modèles d’IA de ByteDance (propriétaire de TikTok)

Anciens noms

anthropic-aiAnthropic · un ancien nom utilisé par Anthropic, encore présent dans de nombreux robots.txtClaude-WebAnthropic · un ancien nom utilisé par Anthropic, encore présent dans de nombreux robots.txt

Quels moteurs d’IA dépendent de ces robots ? Moteurs d’IA →

Essayez Neural Ranks

Découvrez où se situe votre marque dans la recherche par IA.

Indiquez votre site, confirmez les sujets proposés et voyez la première analyse réelle sur les 5 moteurs d’IA. Gratuit et sans carte bancaire.