Claude répond à partir de ce qu’il a appris pendant l’entraînement et, de plus en plus, d’une recherche web en direct. Chaque voie a son propre crawler et ses propres règles. Voici comment les deux fonctionnent, d’après la documentation d’Anthropic, et ce que vous pouvez changer.
Par l’entraînement. Claude a appris à partir de textes du web collectés avant sa date limite d’entraînement. Si votre marque était alors décrite largement et de façon cohérente, Claude peut vous citer sans aucune recherche. Ces connaissances ne changent qu’à l’entraînement d’un nouveau modèle, elles évoluent donc lentement.
Par une recherche en direct. Claude peut chercher sur le web pendant qu’il répond. Le centre d’aide d’Anthropic indique que Claude « searches the web when it helps », qu’un utilisateur peut aussi le lui demander, et que « every response includes citations » (Centre d’aide Claude). Pour les questions du type « meilleur outil pour » et « alternatives à », c’est dans cette recherche qu’une marque plus récente ou plus petite a sa chance.
Anthropic documente trois user agents, chacun avec sa tâche (Centre d’aide Claude). Bloquez-en un et vous ne coupez que cette tâche :
| User agent | Ce qu’il fait | Si vous le bloquez | Grands sites qui le bloquent |
|---|---|---|---|
ClaudeBot | Collecte du contenu web qui pourrait servir à l’entraînement | Vos futures pages restent hors des données d’entraînement | 13.4% |
Claude-SearchBot | Explore pour améliorer la qualité des résultats de recherche de Claude | Anthropic dit que cela peut réduire votre visibilité dans les résultats de recherche | 5.4% |
Claude-User | Récupère une page quand la question d’un utilisateur en a besoin | Claude ne peut pas ouvrir votre page pour cet utilisateur | 5.6% |
Part de 4,762 fichiers robots.txt du top 10,000 de Tranco qui interdisent chaque crawler sur la page d’accueil, lus le 28 octobre 2026. Méthode dans notre étude sur les crawlers.
La plupart des sites ont bien fait la distinction : sur les 640 grands sites qui bloquent ClaudeBot, 385 (60 %) laissent encore entrer Claude-SearchBot. Ceux qui posent problème, ce sont les blocages accidentels. 108 des 256 sites qui bloquent Claude-SearchBot ne le nomment jamais ; une règle User-agent: * écrite pour d’autres bots s’en charge. Anthropic respecte aussi la ligne non standard Crawl-delay si vous devez ralentir ses crawlers plutôt que les arrêter.
Anthropic ne dit pas dans ses pages d’aide quel moteur de recherche Claude utilise. Sa liste de sous-traitants le dit. Au 28 octobre 2026, le Trust Center d’Anthropic listait trois entreprises sous « Web Search » :
La liste ne dit pas comment les trois se répartissent le travail, alors n’y lisez pas plus que ceci : vos pages doivent être dans un index web que Claude peut atteindre, et celui de Brave est celui que vous pouvez vérifier vous-même. Cherchez votre marque et votre catégorie sur search.brave.com. Brave dit que son crawler n’annonce pas de user agent propre, et que si Googlebot ne peut pas explorer une page, Brave ne le fera pas non plus (Aide Brave Search). Une page que vous tenez à l’écart de Googlebot est donc aussi tenue à l’écart de Brave. La recherche d’images dans Claude est distincte : le centre d’aide d’Anthropic dit qu’elle repose sur Bing.
*.claude.com/crawling/bots.json.Posez à Claude les questions de vos acheteurs et lisez les réponses, y compris les sites qu’il cite. Mentioned pose à Claude, ChatGPT et Gemini cinq questions d’acheteurs sur votre catégorie, montre la phrase où vous êtes cité ou qui a été cité à votre place, et suit les mêmes questions chaque semaine une fois que vous les avez enregistrées. Pour les autres assistants, voir nos guides ChatGPT, Perplexity, Gemini et Copilot.
Non. ClaudeBot collecte des données d’entraînement. Les réponses de recherche de Claude dépendent de Claude-SearchBot et de Claude-User, qu’Anthropic documente séparément. Bloquez ClaudeBot et laissez les deux autres autorisés si vous voulez rester hors de l’entraînement tout en restant trouvable.
La liste des sous-traitants d’Anthropic nomme trois fournisseurs de recherche web pour Claude : Brave Search, TurboPuffer et Parallel Web Systems. Elle ne dit pas comment ils se répartissent le travail. La recherche d’images dans Claude repose sur Bing, selon le centre d’aide d’Anthropic.
Quand il cherche sur le web, oui. Anthropic dit que chaque réponse issue d’une recherche web inclut des citations, avec des liens et des extraits pertinents, pour que vous voyiez sur quelles pages une réponse s’est appuyée.
Posez à Claude les questions qu’un acheteur poserait sur votre catégorie, avec la recherche web activée, et regardez si vous êtes cité. Comme les réponses varient, posez plusieurs questions et répétez-les dans le temps. Mentioned le fait automatiquement sur Claude, ChatGPT et Gemini.