Robots d'IA bloqués dans la recherche
Réponse courte
Le fichier robots.txt empêche les robots qu'utilisent ChatGPT, Claude, Perplexity et d'autres pour trouver des réponses. Vos pages ne peuvent pas être citées ni liées dans ces réponses. Pour corriger : autorisez OAI-SearchBot, Claude-SearchBot, PerplexityBot et les robots similaires dans robots.txt (vous pouvez tout de même bloquer les robots d'entraînement).
Par l'équipe SmooxSEO. Mis à jour le 16 novembre 2026.
Ce que cela signifie et pourquoi c'est important
Le fichier robots.txt empêche les robots qu'utilisent ChatGPT, Claude, Perplexity et d'autres pour trouver des réponses. Vos pages ne peuvent pas être citées ni liées dans ces réponses.
Comment corriger
Autorisez OAI-SearchBot, Claude-SearchBot, PerplexityBot et les robots similaires dans robots.txt (vous pouvez tout de même bloquer les robots d'entraînement).
Causes fréquentes
- Une règle robots.txt bloque les robots d'IA en même temps que ceux que vous vouliez bloquer.
- Un réglage « bloquer l'IA » dans un CMS, un CDN ou un outil de sécurité bloque aussi les assistants de recherche.
- Copier un robots.txt d'un autre site sans le lire.
Comment le repérer
Ouvrez yourdomain.com/robots.txt et recherchez OAI-SearchBot, ChatGPT-User, Claude-SearchBot, Claude-User, PerplexityBot et Perplexity-User. Bloquer les robots d'entraînement (GPTBot, ClaudeBot, CCBot) est un choix ; bloquer ces robots de recherche et de réponse vous exclut des réponses de l'IA. SmooxSEO teste chaque robot d'IA par rapport à votre robots.txt et avec des requêtes en direct.
Exemple
User-agent: OAI-SearchBot
Disallow: /# Autoriser la recherche IA, bloquer l'entraînement IA si vous le souhaitez
User-agent: GPTBot
Disallow: /
User-agent: OAI-SearchBot
Allow: /Erreurs à éviter
- Bloquer tous les robots d'IA pour empêcher l'entraînement des modèles : vous disparaissez aussi des réponses de la recherche ChatGPT, de Claude et de Perplexity.
- Autoriser les robots dans robots.txt alors qu'un pare-feu les bloque encore.
Corriger selon votre plateforme
- robots.txt
- Supprimez les règles Disallow pour OAI-SearchBot, ChatGPT-User, Claude-SearchBot, Claude-User, PerplexityBot et Perplexity-User. Vous pouvez tout de même bloquer les robots d'entraînement comme GPTBot et ClaudeBot.
- Cloudflare
- Vérifiez Security > Bots et les réglages des robots d'IA : autorisez les robots de recherche et de requêtes utilisateur des assistants sur lesquels vous voulez apparaître.
Questions fréquentes
Puis-je bloquer l'entraînement de l'IA tout en apparaissant dans les réponses de ChatGPT ?
Oui. OpenAI utilise GPTBot pour l'entraînement et OAI-SearchBot pour la recherche ; Anthropic utilise ClaudeBot pour l'entraînement et Claude-SearchBot pour la recherche. Bloquez le robot d'entraînement et autorisez celui de recherche.
Le blocage des robots d'IA affecte-t-il Google ?
Bloquer ces robots ne change pas le classement dans Google. Google utilise Googlebot, et le jeton séparé Google-Extended contrôle uniquement l'utilisation de votre contenu pour entraîner Gemini.
Quelle est la gravité ?
Une page ne peut pas être trouvée, indexée ou jugée fiable, ou les moteurs de recherche ne peuvent pas lire une partie du site. Corrigez-les rapidement : cela coûte du trafic.
À propos des vérifications : Recherche IA
Permet de savoir si les assistants IA (ChatGPT, Claude, Perplexity, Gemini, Copilot) peuvent lire et citer votre site : accès des robots IA, llms.txt et contenu prêt à répondre.
Trouver ce problème sur votre site
SmooxSEO vérifie l'ensemble de votre site pour ce problème et 311 autres, liste les détails et vous dit quoi corriger en premier.