Cómo buscan los asistentes de IA
Los asistentes que responden con fuentes buscan en la web con sus propios rastreadores y citan las páginas que han podido leer. Cada empresa separa el rastreador que alimenta sus respuestas del que recoge textos para entrenar sus modelos y publica sus nombres, así que puedes decidir sobre cada uno por separado. Estos son los que documentan OpenAI, Perplexity, Anthropic y Google; cada empresa mantiene la lista al día en su web:
| Servicio | Rastreador de sus respuestas | Rastreador para entrenar modelos |
|---|---|---|
| ChatGPT (OpenAI) | OAI-SearchBot | GPTBot |
| Perplexity | PerplexityBot | Perplexity declara que PerplexityBot no se usa para entrenar modelos |
| Claude (Anthropic) | Claude-SearchBot | ClaudeBot |
| Google: vistas creadas con IA y modo IA | Googlebot, el de la búsqueda de siempre | Google-Extended, para los modelos Gemini |
Lo que dice cada una de su buscador:
- ChatGPT. Según OpenAI, OAI-SearchBot sirve para mostrar webs en las funciones de búsqueda de ChatGPT; las webs que lo bloquean dejan de aparecer en esas respuestas y solo pueden salir como enlaces de navegación. Un cambio en robots.txt tarda unas 24 horas en aplicarse.
- Perplexity. PerplexityBot está pensado para mostrar y enlazar webs en sus resultados.
- Claude. Cada respuesta con búsqueda incluye citas a sus fuentes, y Anthropic avisa de que bloquear Claude-SearchBot puede reducir la visibilidad de tu web en las búsquedas de sus usuarios.
- Google. Para salir como enlace en las vistas creadas con IA o en el modo IA, una página tiene que estar indexada y poder mostrarse en la Búsqueda con un fragmento. Google dice que no hay requisitos adicionales ni optimizaciones especiales.
Hay un tercer tipo de visita: la que hace el asistente cuando una persona se lo pide en el chat, por ejemplo que lea tu enlace. Entra con otro nombre (ChatGPT-User, Perplexity-User, Claude-User). OpenAI avisa de que a esas visitas pueden no aplicarse las reglas de robots.txt y Perplexity, de que su agente suele ignorarlas; Anthropic dice que Claude-User las respeta.
Qué leen: el texto de tu página
Un asistente responde con palabras, así que lo que puede citar de ti es lo que tu web dice en texto: quién eres, qué haces, dónde se ve tu obra y cómo es cada pieza. De una imagen sola saca poco. Google explica que, para entender de qué trata una imagen, usa su texto alternativo junto con algoritmos de visión artificial y el contenido de la página donde está.
Eso se traduce en cuatro decisiones:
- La ficha, escrita en la página. Título, año, técnica, medidas y serie de cada obra, en texto y no solo dentro de una imagen o de un PDF. Cómo ordenarla está en la ficha técnica de una obra de arte.
- Un texto alternativo en cada imagen, que describe lo que se ve (y el título, si no está escrito al lado): cómo escribir el texto alternativo de una obra.
- Frases que se entienden solas. «Nombre Apellido (Valencia, 1988) es pintora; trabaja con óleo sobre lino y expone con la galería X desde 2021» se puede citar tal cual, porque cada dato se sostiene sin contexto.
- Los textos, en el HTML que entrega tu web. En un estudio de Vercel y MERJ, los rastreadores de OpenAI, Anthropic, Meta, ByteDance y Perplexity leían el HTML sin ejecutar JavaScript; el de Gemini sí lo ejecutaba, porque usa la infraestructura de Googlebot. Por eso conviene que tu biografía y tus fichas lleguen ya escritas en el HTML que envía tu web.
Los mismos datos en todas las páginas que hablan de ti
Para un asistente eres una entidad: una persona con un nombre, una disciplina, una ciudad y una obra que aparece en muchas páginas a la vez. Cuanto más coinciden esas páginas entre sí (tu web, tus perfiles, las galerías con las que trabajes, las convocatorias que hayas ganado y la prensa), más fácil es que la respuesta sobre ti sea correcta.
- El nombre, escrito siempre igual, con sus tildes y con el segundo apellido o sin él, pero siempre de la misma forma.
- La biografía corta, la misma en todas partes, con los mismos años y lugares. Cómo escribirla, con ejemplos en tres longitudes, en cómo escribir la biografía de un artista.
- Los enlaces en los dos sentidos: tu web enlaza tus perfiles y las páginas que otros publican sobre ti, y desde esos perfiles se llega a tu web.
- Las páginas viejas, actualizadas. Pide a quien publicó datos antiguos (una galería, un medio, una convocatoria) que los corrija.
La lista completa para que te encuentren por tu nombre, con el panel de Google y Search Console, está en SEO para artistas. Aquí basta con la idea: a los asistentes les ayuda lo mismo que a los buscadores.
Datos estructurados de persona y de obra
Los datos estructurados describen tu página para las máquinas con el vocabulario de schema.org: en la página de biografía, una persona (Person) con sus perfiles; en la página de cada obra, una obra visual (VisualArtwork) con su técnica, su soporte y sus medidas.
Para la entidad, la propiedad que más aporta es sameAs. Schema.org la define como la dirección de una página que indica sin ambigüedad la identidad de algo, como su web oficial o su ficha en Wikipedia o Wikidata. En tu caso, ahí van tus perfiles y, si las hay, las páginas de las galerías que te representan.
Conviene saber dos cosas que dice Google. La primera: los datos estructurados son opcionales para la búsqueda con IA generativa, aunque recomienda seguir usándolos como parte del SEO general. La segunda: tienen que coincidir con el texto visible de la página. Sirven para confirmar lo que la página ya dice. Qué propiedades lleva la ficha de una obra, con ejemplos, está en SEO para artistas.
Qué poner en robots.txt
El archivo robots.txt, en la raíz de tu web, dice a cada rastreador qué puede leer. Para aparecer en las respuestas, deja pasar a los de búsqueda; lo del entrenamiento es decisión tuya, y como cada empresa separa sus rastreadores, puedes cerrar el paso a los de entrenamiento y seguir en sus buscadores.
Un ejemplo que deja la web abierta a buscadores y asistentes y la cierra a los rastreadores de entrenamiento que se documentan por su nombre:
User-agent: *
Allow: /
User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: Applebot-Extended
User-agent: CCBot
Disallow: /
Sitemap: https://tunombre.com/sitemap.xml
Qué hace cada línea del segundo bloque:
- GPTBot y ClaudeBot: los rastreadores con los que OpenAI y Anthropic recogen textos para entrenar sus modelos. Anthropic precisa que bloquear ClaudeBot indica que los materiales futuros de tu web deben quedar fuera de sus datos de entrenamiento, y pide repetirlo en cada subdominio.
- Google-Extended: controla si Google puede usar tu contenido para entrenar los modelos Gemini y para fundamentar las respuestas de las aplicaciones de Gemini. Google afirma que no afecta a tu inclusión ni a tu posición en la Búsqueda.
- Applebot-Extended: Apple lo ofrece para excluir tu web del entrenamiento de sus modelos, y tu contenido puede seguir apareciendo en Spotlight, Siri y Safari.
- CCBot: el rastreador de Common Crawl, una fundación que mantiene un archivo abierto de la web. Vercel lo describe como una fuente habitual de datos para entrenar modelos de lenguaje.
En Google hay además un control propio: Search Console permite incluir o excluir tu web de las vistas creadas con IA, del modo IA y de las funciones de IA de Discover (en Ajustes, «IA generativa en la Búsqueda»). Viene en «incluir», y Google aclara que ese control no afecta al entrenamiento: para eso está Google-Extended. Si quieres seguir en la Búsqueda y limitar lo que se muestra de una página, sus herramientas son nosnippet, data-nosnippet y max-snippet.
llms.txt: lo que se sabe
llms.txt es una propuesta de formato: un archivo en Markdown en la raíz de la web con un resumen y los enlaces que un agente de IA necesita para entenderla. Lo propuso Jeremy Howard en 2024; la especificación está en llmstxt.org.
Los hechos:
- Google Search lo ignora. Su guía para la búsqueda con IA dice que la Búsqueda no utiliza esos archivos y que crearlos no perjudica ni beneficia tu visibilidad.
- Los laboratorios lo publican para su documentación. Según la propia propuesta, OpenAI, Anthropic y Google tienen el suyo para sus páginas de desarrolladores.
- Lo que esas empresas documentan para sus rastreadores es robots.txt. Es el archivo que explican OpenAI, Perplexity y Anthropic en sus páginas de rastreadores.
Publicarlo cuesta poco y puede servir a los agentes que lo lean. Lo que decide si te citan sigue siendo el texto de tus páginas.
Cómo ver en tu analítica las visitas de los asistentes
Google Analytics 4 separa esas visitas: tiene un canal predeterminado, «Asistente de IA», para quien llega desde ChatGPT, Gemini, Deepseek, Copilot o Grok. Las vistas creadas con IA y el modo IA de Google cuentan en otro canal, el de búsqueda orgánica, y se miden en Search Console.
- En Google Analytics, mira los informes de adquisición agrupados por canal y sigue el de «Asistente de IA» mes a mes: cuántas visitas, a qué páginas y si alguien escribe después.
- En Search Console, el informe de rendimiento de IA generativa enseña las impresiones de tu web en las vistas creadas con IA y en el modo IA, por página, país y dispositivo.
- Con otra analítica, busca en la lista de sitios de origen chatgpt.com, perplexity.ai, claude.ai, gemini.google.com y copilot.microsoft.com.
- En los registros de tu servidor aparecen los rastreadores por su nombre (OAI-SearchBot, PerplexityBot, Claude-SearchBot). Si faltan, revisa tu robots.txt y el cortafuegos de tu alojamiento: Perplexity recomienda permitir en él sus rangos de direcciones.
Una rutina que da buena información: una vez al mes, pregunta a dos o tres asistentes por tu nombre, tu disciplina y tu ciudad, apunta qué dicen y qué fuentes citan, y corrige en origen lo que esté mal. Dejar que los rastreadores lean tu web, escribir lo esencial en frases que se pueden citar y medirlo cada mes es parte de nuestro servicio de posicionamiento para artistas.
Fuentes
- OpenAI, rastreadores de OpenAI (OAI-SearchBot, GPTBot y ChatGPT-User) (se abre en una pestaña nueva)
- Perplexity, rastreadores de Perplexity (se abre en una pestaña nueva)
- Anthropic, cómo rastrea la web y cómo bloquear sus rastreadores (se abre en una pestaña nueva)
- Anthropic, búsqueda web en Claude (se abre en una pestaña nueva)
- Google Search Central, funciones de IA y tu sitio web (se abre en una pestaña nueva)
- Google Search Central, guía sobre la optimización para las funciones de IA generativa de la Búsqueda (se abre en una pestaña nueva)
- Google, lista de rastreadores comunes (Google-Extended) (se abre en una pestaña nueva)
- Ayuda de Search Console, control de la IA generativa de la Búsqueda (se abre en una pestaña nueva)
- Ayuda de Search Console, informe de rendimiento de IA generativa (se abre en una pestaña nueva)
- Ayuda de Google Analytics, grupo de canales predeterminado (se abre en una pestaña nueva)
- Google Search Central, prácticas recomendadas de SEO para imágenes (se abre en una pestaña nueva)
- Vercel y MERJ, The rise of the AI crawler (se abre en una pestaña nueva)
- Schema.org, propiedad sameAs (se abre en una pestaña nueva)
- Apple, acerca de Applebot y Applebot-Extended (se abre en una pestaña nueva)
- Common Crawl, CCBot (se abre en una pestaña nueva)
- Jeremy Howard, propuesta del archivo /llms.txt (se abre en una pestaña nueva)