Robots d'IA

Tous les robots qui décident de votre visibilité IA

Que ChatGPT, Claude, Perplexity ou Google puissent lire — et recommander — votre entreprise dépend d'une poignée de robots. Ce que fait chacun, et s'il faut le laisser entrer.

Robots d'index IA

OpenAI

OAI-SearchBot

Builds the index behind ChatGPT search — this is the bot that decides if ChatGPT can cite you.

Perplexity

PerplexityBot

Indexes pages for Perplexity's answer engine — Perplexity cites sources on almost every answer.

Amazon

Amazonbot

Feeds Alexa and Amazon's AI answers.

DuckDuckGo

DuckAssistBot

Powers DuckDuckGo's AI-assisted answers.

Récupérateurs IA à la demande

OpenAI

ChatGPT-User

Fetches your page live when a ChatGPT user asks about you in a conversation.

Anthropic

Claude-User

Fetches your page live during a Claude conversation.

Perplexity

Perplexity-User

Fetches your page live when a Perplexity user asks.

Robots d'entraînement IA

OpenAI

GPTBot

Collects pages to train ChatGPT's underlying models.

Anthropic

ClaudeBot

Crawls pages for Claude's models and search index.

Google

Google-Extended

Controls whether Google may train Gemini on your content. Blocking it does NOT affect Google Search or AI Overviews.

Common Crawl

CCBot

Builds a public web archive that many AI companies train models on. Blocking it quietly removes you from future models' knowledge.

ByteDance

Bytespider

Trains ByteDance's models (Doubao).

Apple

Applebot-Extended

Controls whether Apple may use your content for Apple Intelligence.

Meta

Meta-ExternalAgent

Collects pages to train Meta's Llama models.

Robots de recherche

Google

Googlebot

Google's main crawler. Powers Google Search AND the AI Overviews box at the top of results.

Microsoft

Bingbot

Bing's crawler. Also feeds AI assistants that use Bing's index (including parts of ChatGPT's search), so blocking it hurts more than Bing.

Lesquels atteignent réellement votre site ? L'audit gratuit SeeGeo évalue votre robots.txt face à chaque robot de cette page — plus votre CDN et le rendu JavaScript.

Lancer un audit gratuit

Questions fréquentes

Comment savoir si les robots IA (GPTBot, ClaudeBot) peuvent lire mon site ?

Vérifiez deux choses : que votre robots.txt n'interdit pas le robot, et que votre serveur ou votre CDN renvoie bien la page quand la requête arrive avec l'user-agent de ce robot. La seconde vérification compte parce qu'un pare-feu comme Cloudflare peut bloquer les robots IA quel que soit le robots.txt. Le vérificateur gratuit de SeeGeo fait les deux pour GPTBot, OAI-SearchBot, ClaudeBot et PerplexityBot en quelques secondes.

Quels robots IA une petite entreprise doit-elle autoriser ?

Autorisez les robots de type recherche, ceux qui alimentent les réponses que voient les clients — OAI-SearchBot et ChatGPT-User pour ChatGPT, Googlebot pour les AI Overviews de Google, PerplexityBot et ClaudeBot — car les bloquer vous retire des recommandations. Les robots d'entraînement seuls (GPTBot, Google-Extended, CCBot) sont un vrai choix : les autoriser aide les futurs modèles à savoir que vous existez, les bloquer garde votre contenu hors des données d'entraînement.

Le robots.txt suffit-il pour contrôler les robots IA ?

Non. Le robots.txt est une demande que les robots bien élevés respectent, mais votre CDN ou votre pare-feu peut bloquer un robot que le robots.txt autorise, et un robot peut être autorisé alors que vos pages ne s'affichent qu'avec du JavaScript qu'il n'exécute jamais. L'accès n'est réel que si la requête aboutit et que le contenu est dans le HTML.