Être cité par Claude : 3 robots d’Anthropic, lesquels autoriser ?

Par SEOgrinder · Publié le 4 novembre 2026 · 10 min de lecture

Réponse courte : Personne ne peut promettre d’être cité par Claude. La page d’aide d’Anthropic nomme trois robots et dit ce qui se passe quand vous désactivez chacun d’eux ; elle ne décrit pas comment Claude choisit les pages qu’il nomme. Ce que vous contrôlez, c’est le robots.txt. ClaudeBot collecte des contenus qui peuvent contribuer à l’entraînement, Claude-User récupère une page quand quelqu’un pose une question à Claude, et Claude-SearchBot travaille sur la qualité des résultats de recherche. Pour les deux derniers, Anthropic indique que les désactiver peut réduire votre visibilité dans la recherche. L’entraînement est une décision à part.

Ce que vous maîtrisez quand vous voulez être cité par Claude

Commençons par la limite. Que Claude nomme une page dans une réponse relève de Claude. L’article d’aide d’Anthropic « Does Anthropic crawl data from the web, and how can site owners block the crawler? » porte sur l’exploration du web et sur la façon de s’en exclure. Il dit quels robots existent, à quoi sert chacun et comment les limiter. Il ne dit pas comment Claude choisit ses sources, si autoriser un robot mène à une mention, ni combien de temps une modification met à agir. Nous ne connaissons aucune source qui prouve un effet d’un réglage du robots.txt sur les citations ; cet article n’en promet donc aucun.

Ce que la page vous donne en revanche, c’est une répartition des rôles. Anthropic dit utiliser des robots « to gather data from the public web for model development, to search the web, and to retrieve web content at users’ direction » (pour collecter des données sur le web public afin de développer ses modèles, pour chercher sur le web et pour récupérer du contenu web à la demande des utilisateurs). La page est datée du 7 avril 2026 et nous l’avons consultée le 4 novembre 2026. Tout ce que nous disons d’Anthropic vient d’elle, et nous signalons nos propres lectures.

Lisible n’est pas cité. Une page que les robots d’Anthropic peuvent lire peut tout de même manquer dans une réponse, et une page qu’ils ne peuvent pas lire ne leur donne rien à utiliser. La lisibilité est la part que vous maîtrisez. SEOgrinder vérifie cette part et ne mesure pas les citations ; notre article sur la visibilité IA explique la différence.

Les trois robots d’Anthropic dans un tableau

Robot	À quoi il sert, selon Anthropic	Ce qui se passe si vous le désactivez, selon Anthropic
ClaudeBot	Collecte du contenu web qui pourrait contribuer à l’entraînement de ses modèles d’IA générative	Signale que les futurs contenus du site doivent être exclus des jeux de données d’entraînement
Claude-User	Soutient les utilisateurs de Claude : quand quelqu’un pose une question à Claude, il peut accéder à des sites avec cet agent	Empêche Anthropic de récupérer votre contenu en réponse à la requête d’un utilisateur, ce qui peut réduire votre visibilité dans la recherche web pilotée par l’utilisateur
Claude-SearchBot	Parcourt le web pour améliorer la qualité des résultats de recherche, en analysant les contenus pour rendre les réponses de recherche plus pertinentes et plus précises	Empêche Anthropic d’indexer votre contenu pour l’optimisation de la recherche, ce qui peut réduire votre visibilité et la précision des résultats de recherche pour les utilisateurs

La même page ajoute que ses robots respectent les directives standard du robots.txt et les technologies anti-contournement : Anthropic n’essaie pas de contourner les CAPTCHA. Elle ne recommande d’autoriser aucun robot. Elle décrit ce qui se passe quand vous en désactivez un, et le choix vous appartient.

Robot 1 : ClaudeBot, le robot d’entraînement

D’après le tableau, restreindre ClaudeBot signale que votre futur contenu doit être exclu des jeux de données d’entraînement d’Anthropic. La page parle de futur contenu, et nous n’y lisons rien de plus.

Ce que la ligne ne dit pas compte ici. Pour ClaudeBot, Anthropic nomme l’exclusion de l’entraînement et aucun effet sur la recherche ; les effets sur la visibilité figurent dans les lignes des deux autres robots. C’est notre lecture d’un tableau, pas une déclaration d’Anthropic, mais elle suggère que ClaudeBot n’est pas le réglage à regarder si vous voulez être trouvé dans la recherche de Claude. Autoriser ou non l’entraînement est une décision d’entreprise que SEOgrinder ne prend pas à votre place.

Robot 2 : Claude-User, le robot qui récupère une page à la demande

Claude-User est le robot derrière une requête isolée : une personne pose une question à Claude, et Claude peut ouvrir un site pour y répondre. Anthropic écrit « may » (peut) : une question ne conduit donc pas toujours à une visite.

Anthropic dit que Claude-User permet aux propriétaires de sites de contrôler quels sites peuvent être consultés par ces requêtes déclenchées par l’utilisateur. Avec son affirmation que tous ses robots respectent le robots.txt, cela signifie qu’une règle de votre fichier s’applique ici aussi. D’autres éditeurs diffèrent : OpenAI écrit à propos de ChatGPT-User que « robots.txt rules may not apply » (les règles du robots.txt peuvent ne pas s’appliquer) (OpenAI). Lisez la page de chaque éditeur et ne reportez pas une règle de l’un à l’autre.

Si vous désactivez Claude-User, Anthropic indique que son système ne peut plus récupérer votre contenu en réponse à la requête d’un utilisateur, ce qui peut réduire votre visibilité dans la recherche web pilotée par l’utilisateur.

Robot 3 : Claude-SearchBot, le robot de la recherche

Claude-SearchBot est le robot dont la description porte sur les résultats de recherche eux-mêmes. Selon Anthropic, il parcourt le web pour améliorer la qualité des résultats de recherche et analyse les contenus pour rendre les réponses plus pertinentes et plus précises. Le désactiver empêche l’indexation de votre contenu pour l’optimisation de la recherche.

Notre lecture : si vous voulez apparaître dans les résultats de recherche de Claude, Claude-SearchBot est la première ligne à vérifier dans votre robots.txt, car son rôle est l’indexation pour la recherche. L’autoriser est la condition préalable à ce que décrit la page. Ce n’est pas la promesse que quelque chose s’affichera.

Quel robot autoriser ? Trois questions

Anthropic ne dit pas quel robot autoriser ; voici donc comment nous déciderions. C’est notre avis, pas celui d’Anthropic.

Voulez-vous que vos pages figurent dans les résultats de recherche de Claude ? Alors ne désactivez pas Claude-SearchBot.
Voulez-vous que Claude puisse ouvrir vos pages quand une personne l’interroge à leur sujet ? Alors ne désactivez pas Claude-User.
Voulez-vous que vos contenus entrent dans des jeux de données d’entraînement ? C’est la décision sur ClaudeBot, et elle peut différer des deux premières. Un site peut autoriser les trois ou refuser seulement l’entraînement.

Aucune de ces réponses n’est une erreur technique. L’erreur arrive quand vous décidez par accident, par exemple parce qu’un Disallow: / hérité d’un site de préproduction se trouve encore dans votre fichier.

Comment autoriser ou bloquer chaque robot dans le robots.txt

Un fichier qui autorise la recherche et les consultations à la demande et refuse l’entraînement :

# Entraînement : votre propre décision (cet exemple le refuse)
User-agent: ClaudeBot
Disallow: /

# Recherche et consultations à la demande d'un utilisateur
User-agent: Claude-SearchBot
User-agent: Claude-User
Allow: /

Pour bloquer un robot sur tout votre site, la page d’Anthropic montre une ligne User-agent avec le nom du robot suivie de Disallow: /, placée dans le robots.txt du répertoire de premier niveau. Elle demande de le faire pour chaque sous-domaine dont vous voulez vous exclure : www.example.com et blog.example.com ont donc chacun besoin de leur propre fichier. Pour seulement ralentir un robot, la page indique qu’Anthropic prend en charge la ligne non standardisée Crawl-delay et montre Crawl-delay: 1 pour ClaudeBot.

La page déconseille aussi de bloquer les adresses IP de ses robots. Cela peut mal fonctionner et ne garantit pas l’exclusion, car Anthropic ne peut alors plus lire votre robots.txt. Mettez la règle dans le robots.txt.

Un piège vient de la norme, pas d’Anthropic. Selon la RFC 9309, un crawler suit le groupe qui correspond à son nom, et s’il en a un à lui, le groupe * ne s’applique plus à lui. Si vous ajoutez un groupe pour Claude-SearchBot, répétez chaque règle qui doit rester valable. Notre article sur le robots.txt pour les crawlers IA montre la correction et couvre aussi OpenAI et Perplexity.

Notre propre fichier est un exemple, pas une recommandation. Le 4 novembre 2026, nous avons récupéré https://seogrinder.com/robots.txt avec curl : un groupe commun avec * et neuf user agents d’IA, dont ClaudeBot, Claude-SearchBot et Claude-User, qui autorise tout sauf /api/. Le vôtre peut différer.

Distinguer les vraies visites d’Anthropic des fausses

La page renvoie vers une liste, claude.com/crawling/bots.json, et dit qu’un crawler dont l’adresse source figure dedans vient d’Anthropic. Nous l’avons consultée le 4 novembre 2026 : un fichier JSON avec des préfixes d’adresses et un champ creationTime qui indiquait le 20 octobre 2026. Elle n’est pas répartie par robot ; elle montre donc qu’une visite vient d’Anthropic, pas lequel des trois robots l’a faite. Cela, vous ne le lisez que dans le nom du user agent, et n’importe qui peut écrire un nom dans un en-tête. Ne comptez donc une visite que si son adresse figure dans la liste, et récupérez le fichier de temps en temps.

Cherchez les noms dans votre journal, pas une version. La page n’imprime pas de chaînes de user agent complètes. Un journal vide ne prouve aucun blocage, car la page ne dit pas à quelle fréquence les robots passent.
Un robot qui reçoit une page de challenge ne lit rien. Anthropic dit que ses robots ne contournent pas les CAPTCHA. Sa page ne dit pas s’ils exécutent JavaScript ; notre article sur les crawlers IA et JavaScript résume ce qu’on sait.

Comment SEOgrinder aide

SEOgrinder est gratuit, ne demande aucun compte, et nous le développons. Saisissez une adresse, lancez l’analyse et ouvrez le rapport. Deux endroits comptent ici :

Onglet Préparation à l'IA, « Contrôles pour agents IA » : le point « Piloter les robots d’IA » indique combien de robots d’IA ont une règle explicite, combien sont autorisés et combien sont bloqués, et nomme les bloqués. Il connaît ClaudeBot, Claude-User et Claude-SearchBot par leur nom. ClaudeBot compte comme robot d’entraînement et Claude-SearchBot comme robot de recherche, et le point n’est rempli que si l’entraînement et la recherche ont chacun une règle explicite. Une règle pour Claude-User seul ne règle ni l’un ni l’autre.
Onglet Tâches, « Robots d’IA autorisés mais refusés par le serveur — à vérifier » : SEOgrinder teste comment le serveur répond à quatre noms de robots fixes, seulement à ceux que le robots.txt autorise, et compare avec un navigateur. Parmi les robots d’Anthropic, seul ClaudeBot en fait partie, et le test n’utilise que le nom.

Cliquez sur Copier le prompt agent sur un point pour obtenir une consigne destinée à votre assistant de programmation, et sur Réanalyser après une modification. SEOgrinder ne lit pas le journal de votre serveur et ne mesure pas si Claude nomme votre site.

Erreurs fréquentes

Bloquer ClaudeBot pour quitter la recherche de Claude. Pour ClaudeBot, Anthropic nomme l’exclusion de l’entraînement. Les effets sur la recherche sont nommés pour les deux autres robots.
Tout bloquer par précaution. Pour Claude-User et Claude-SearchBot, Anthropic dit que la visibilité peut baisser.
Bloquer par adresse IP au lieu du robots.txt. Anthropic dit que cela peut ne pas fonctionner.
Ne corriger que le domaine principal. Anthropic demande la règle sur chaque sous-domaine dont vous voulez vous exclure.
Ajouter un groupe pour un seul robot et perdre les règles communes. Son groupe propre remplace le groupe *.
Lire un robot autorisé comme une citation. Autoriser un robot lève un obstacle et ne promet aucune mention.

Questions fréquentes

Puis-je obliger Claude à citer ma page ?

Non. Personne ne peut imposer une citation, et la page d’Anthropic ne décrit aucun réglage qui en provoque une. Vous pouvez lever les obstacles pour que ses robots puissent lire vos pages. Que Claude les nomme ou non reste sa décision.

Bloquer ClaudeBot me retire-t-il de la recherche de Claude ?

La page d’Anthropic ne le dit pas. Pour ClaudeBot, elle nomme l’exclusion des futurs contenus des jeux de données d’entraînement. Les effets sur la recherche qu’elle nomme concernent Claude-User et Claude-SearchBot.

SEOgrinder montre-t-il si Claude cite mon site ?

Non. Il vérifie la base technique : les systèmes d’IA peuvent-ils atteindre et lire la page ?

Votre prochaine étape

Ouvrez votre robots.txt et cherchez ClaudeBot, Claude-User et Claude-SearchBot. Décidez de chacun en connaissance de cause : la recherche et les consultations à la demande d’un côté, l’entraînement de l’autre. Si vous gérez des sous-domaines, vérifiez chaque fichier. Lancez ensuite l’analyse gratuite dans SEOgrinder, ouvrez les onglets Préparation à l'IA et Tâches, et corrigez ce qui reste ouvert.