Ser citado por Claude: los 3 bots de Anthropic y cuáles permitir

Por SEOgrinder · Publicado · 10 min de lectura

Respuesta corta: Nadie puede prometer que vayas a ser citado por Claude. La página de ayuda de Anthropic nombra tres robots y explica qué ocurre al desactivar cada uno, pero no describe cómo elige Claude las páginas que nombra. Lo que controlas es el robots.txt. ClaudeBot recopila contenido que puede contribuir al entrenamiento, Claude-User accede a una página cuando alguien le hace una pregunta a Claude y Claude-SearchBot trabaja en la calidad de los resultados de búsqueda. En los dos últimos, Anthropic dice que desactivarlos puede reducir tu visibilidad en la búsqueda. El entrenamiento es una decisión aparte.

Qué controlas si quieres ser citado por Claude

Empecemos por el límite. Que Claude nombre una página en una respuesta lo decide Claude. El artículo de ayuda de Anthropic «Does Anthropic crawl data from the web, and how can site owners block the crawler?» trata del rastreo y de cómo excluirse. Dice qué robots existen, para qué sirve cada uno y cómo limitarlos. No dice cómo elige Claude sus fuentes, si permitir un bot lleva a una mención ni cuánto tarda un cambio. No conocemos ninguna fuente que demuestre un efecto de un ajuste del robots.txt sobre las citas, así que este artículo no promete ninguno.

Lo que sí te da esa página es un reparto de tareas. Anthropic dice que usa robots para recopilar datos de la web pública para desarrollar modelos, para buscar en la web y para recuperar contenido web a petición de los usuarios («to gather data from the public web for model development, to search the web, and to retrieve web content at users’ direction»). La página lleva la fecha del 7 de abril de 2026 y la consultamos el 4 de noviembre de 2026. Todo lo que decimos aquí sobre Anthropic procede de ella, y señalamos las frases que son lectura nuestra.

Que se pueda leer no significa que se cite. Una página que los bots de Anthropic pueden leer puede faltar igualmente en una respuesta, y una página que no pueden leer no les da nada que usar. La legibilidad es la parte que controlas. SEOgrinder comprueba esa parte y no mide citas; nuestro artículo sobre la visibilidad en IA explica la diferencia.

Los tres bots de Anthropic en una tabla

BotPara qué sirve, según AnthropicQué ocurre al desactivarlo, según Anthropic
ClaudeBotRecopila contenido web que podría contribuir al entrenamiento de sus modelos de IA generativaIndica que el material futuro del sitio debe quedar excluido de los conjuntos de datos de entrenamiento
Claude-UserApoya a los usuarios de Claude: cuando alguien le hace una pregunta a Claude, este puede acceder a sitios web con este agenteImpide que Anthropic recupere tu contenido para responder a una consulta de un usuario, lo que puede reducir tu visibilidad en la búsqueda web dirigida por el usuario
Claude-SearchBotRecorre la web para mejorar la calidad de los resultados de búsqueda, analizando el contenido para que las respuestas de búsqueda sean más relevantes y precisasImpide que Anthropic indexe tu contenido para optimizar la búsqueda, lo que puede reducir tu visibilidad y la precisión en los resultados de búsqueda de los usuarios

La misma página añade que sus bots respetan las directivas estándar del sector en el robots.txt y las tecnologías contra la elusión: no intenta saltarse los CAPTCHA. No recomienda permitir ninguno de los bots. Describe qué pasa al desactivar uno, y la decisión sigue siendo tuya.

Bot 1: ClaudeBot, el bot de entrenamiento

Según la tabla, restringir a ClaudeBot indica que tu material futuro debe quedar excluido de los conjuntos de datos de entrenamiento de Anthropic. La página habla de material futuro, y no leemos nada más en ello.

Aquí importa lo que la fila no menciona. En el caso de ClaudeBot, Anthropic nombra la exclusión del entrenamiento y ningún efecto sobre la búsqueda; los efectos sobre la visibilidad aparecen en las filas de los otros dos bots. Eso es nuestra lectura de una tabla, no una afirmación de Anthropic, pero sugiere que ClaudeBot no es el ajuste que debes mirar si quieres que te encuentren en la búsqueda de Claude. Si permites el entrenamiento o no es una decisión de negocio que SEOgrinder no toma por ti.

Bot 2: Claude-User, el bot que accede cuando alguien pregunta

Claude-User está detrás de una petición concreta: una persona le hace una pregunta a Claude, y Claude puede abrir un sitio web para responderla. Anthropic escribe «may» (puede), así que una pregunta no siempre lleva a una visita.

Según Anthropic, Claude-User permite a los propietarios de sitios controlar a qué sitios se puede acceder con estas peticiones iniciadas por el usuario. Junto con su afirmación de que todos sus bots respetan el robots.txt, eso significa que una regla de tu archivo se aplica también aquí. Otros operadores lo ven distinto: OpenAI escribe que, para ChatGPT-User, las reglas del robots.txt pueden no aplicarse («robots.txt rules may not apply»; OpenAI). Lee la página de cada operador y no traslades una regla de uno a otro.

Si desactivas Claude-User, Anthropic dice que su sistema ya no puede recuperar tu contenido para responder a una consulta de un usuario, lo que puede reducir tu visibilidad en la búsqueda web dirigida por el usuario.

Bot 3: Claude-SearchBot, el bot de búsqueda

Claude-SearchBot es el robot cuya descripción trata de los propios resultados de búsqueda. Según Anthropic, recorre la web para mejorar la calidad de los resultados y analiza el contenido para que las respuestas de búsqueda sean más relevantes y precisas. Si lo desactivas, Anthropic no puede indexar tu contenido para la búsqueda.

Nuestra lectura: si quieres aparecer en los resultados de búsqueda de Claude, Claude-SearchBot es la primera línea que debes revisar en tu robots.txt, porque su tarea es indexar para la búsqueda. Permitirlo es la condición previa de lo que la página describe. No es una promesa de que se vaya a mostrar algo.

¿Qué bot permitir? Tres preguntas

Anthropic no dice qué bot permitir, así que esta es la forma en que decidiríamos nosotros. Es nuestra opinión, no la de Anthropic.

  1. ¿Quieres que tus páginas salgan en los resultados de búsqueda de Claude? Entonces no desactives Claude-SearchBot.
  2. ¿Quieres que Claude pueda abrir tus páginas cuando una persona pregunta por ellas? Entonces no desactives Claude-User.
  3. ¿Quieres que tu contenido entre en los conjuntos de datos de entrenamiento? Esa es la decisión sobre ClaudeBot, y puede ser distinta de las dos primeras. Un sitio puede permitir los tres o rechazar solo el entrenamiento.

Ninguna de estas respuestas es un error técnico. El error aparece cuando decides sin querer, por ejemplo porque un Disallow: / de un entorno de pruebas sigue en tu archivo.

Cómo permitir o bloquear cada bot en el robots.txt

Un archivo que permite la búsqueda y los accesos a petición del usuario y rechaza el entrenamiento:

# Entrenamiento: decisión tuya (este ejemplo lo rechaza)
User-agent: ClaudeBot
Disallow: /

# Búsqueda y accesos a petición de un usuario
User-agent: Claude-SearchBot
User-agent: Claude-User
Allow: /

Para excluir a un bot de todo tu sitio, la página de Anthropic muestra una línea User-agent con el nombre del bot seguida de Disallow: /, en el robots.txt del directorio de nivel superior. Pide hacerlo en cada subdominio del que quieras excluirte, así que www.example.com y blog.example.com necesitan cada uno su propio archivo. Si solo quieres frenar a un bot, la página dice que Anthropic admite la línea no estándar Crawl-delay y muestra Crawl-delay: 1 para ClaudeBot.

La página también desaconseja bloquear las direcciones IP de sus bots. Puede que no funcione bien ni garantice la exclusión, porque Anthropic dejaría de poder leer tu robots.txt. Escribe la regla en el robots.txt.

Hay una trampa que viene del estándar y no de Anthropic. Según el RFC 9309, un rastreador sigue el grupo que coincide con su nombre, y si tiene uno propio, el grupo * no se le aplica. Si añades un grupo para Claude-SearchBot, repite todas las reglas que deban seguir valiendo. Nuestro artículo sobre el robots.txt para IA muestra la solución y trata también OpenAI y Perplexity.

Nuestro propio archivo es un ejemplo, no una recomendación. El 4 de noviembre de 2026 consultamos https://seogrinder.com/robots.txt con curl: un grupo común con * y nueve user agents de IA, entre ellos ClaudeBot, Claude-SearchBot y Claude-User, que permite todo salvo /api/. El tuyo puede ser distinto.

Cómo distinguir las visitas reales de Anthropic de las falsas

La página enlaza una lista, claude.com/crawling/bots.json, y dice que un rastreador cuya dirección de origen figure en ella viene de Anthropic. La consultamos el 4 de noviembre de 2026: un archivo JSON con prefijos de direcciones y un campo creationTime que indicaba el 20 de octubre de 2026. No está dividida por bots, así que muestra que una visita procede de Anthropic, no cuál de los tres la hizo. Eso solo se deduce del nombre del user agent, y cualquiera puede escribir un nombre en una cabecera. Cuenta una visita solo si su dirección está en la lista, y vuelve a descargar el archivo de vez en cuando.

  • Busca en el registro los nombres, no una versión. La página no imprime cadenas completas de user agent. Un registro vacío no prueba un bloqueo, porque la página no dice con qué frecuencia pasan los bots.
  • Un bot al que se le muestra una página de desafío no lee nada. Anthropic dice que sus bots no se saltan los CAPTCHA. Si ejecutan JavaScript no consta en su página; nuestro artículo sobre los rastreadores de IA y JavaScript resume lo que se sabe.

Cómo te ayuda SEOgrinder

SEOgrinder es gratuito, no necesita cuenta y lo construimos nosotros. Introduce una dirección, inicia el análisis y abre el informe. Aquí importan dos lugares:

  • Pestaña «Preparación para la IA», apartado «Comprobaciones para agentes de IA»: el punto «Controlar los bots de IA» muestra cuántos rastreadores de IA tienen una regla explícita, cuántos están permitidos y cuántos bloqueados, y nombra los bloqueados. Conoce por su nombre a ClaudeBot, Claude-User y Claude-SearchBot. ClaudeBot cuenta como bot de entrenamiento y Claude-SearchBot como bot de búsqueda, y el punto solo se cumple cuando el entrenamiento y la búsqueda tienen cada uno una regla explícita. Una regla solo para Claude-User no resuelve ninguno de los dos.
  • Pestaña «Tareas», «Rastreadores de IA permitidos, pero rechazados por el servidor — revisar»: SEOgrinder comprueba cómo responde el servidor a cuatro nombres de bot fijos, solo a los que el robots.txt permite, y lo compara con un navegador. De los bots de Anthropic solo está ClaudeBot, y la prueba usa únicamente el nombre.

Pulsa Copiar prompt del agente en un punto para obtener una instrucción para tu asistente de programación, y Comprobar de nuevo después de un cambio. SEOgrinder no lee el registro de tu servidor y no mide si Claude nombra tu sitio.

Errores frecuentes

  • Bloquear a ClaudeBot para salir de la búsqueda de Claude. En el caso de ClaudeBot, Anthropic nombra la exclusión del entrenamiento. Los efectos sobre la búsqueda se nombran en los otros dos bots.
  • Bloquear los tres por precaución. Para Claude-User y Claude-SearchBot, Anthropic dice que la visibilidad puede disminuir.
  • Bloquear por dirección IP en lugar de en el robots.txt. Anthropic dice que puede no funcionar.
  • Arreglar solo el dominio principal. Anthropic pide la regla en cada subdominio del que quieras excluirte.
  • Añadir un grupo para un bot y perder las reglas comunes. Su grupo propio sustituye al grupo *.
  • Leer un bot permitido como una cita. Permitir un bot quita un obstáculo y no promete ninguna mención.

Preguntas frecuentes

¿Puedo conseguir que Claude cite mi página?

No. Nadie puede forzar una cita, y la página de Anthropic no describe ningún ajuste que la provoque. Puedes eliminar obstáculos para que sus bots puedan leer tus páginas. Si Claude las nombra, lo decide Claude.

¿Me quita de la búsqueda de Claude bloquear a ClaudeBot?

La página de Anthropic no lo dice. Para ClaudeBot nombra la exclusión del material futuro de los conjuntos de datos de entrenamiento. Los efectos sobre la búsqueda que menciona corresponden a Claude-User y a Claude-SearchBot.

¿SEOgrinder muestra si Claude cita mi sitio?

No. Comprueba la base técnica: si los sistemas de IA pueden alcanzar y leer la página.

Tu siguiente paso

Abre tu robots.txt y busca ClaudeBot, Claude-User y Claude-SearchBot. Decide cada uno a propósito: la búsqueda y los accesos a petición del usuario por un lado, el entrenamiento por otro. Si tienes subdominios, revisa cada archivo. Después haz el análisis gratuito en SEOgrinder, abre las pestañas «Preparación para la IA» y «Tareas», y corrige lo que esté pendiente.

Sigue leyendo

Más artículos del blog