¿Buscó el asistente? Audita las llamadas observables
Una respuesta incluye enlaces y parece reciente. Eso permite revisar qué cita, pero no basta para reconstruir si ejecutó una búsqueda, qué consultas envió o qué páginas abrió. La frase «he buscado» tampoco sustituye un evento registrado por la herramienta.
Esta guía propone un expediente para equipos que auditan ejecuciones de asistentes: configuración, llamadas observables, fuentes devueltas y citas de la respuesta. Sirve para escribir conclusiones que otro revisor pueda comprobar con los mismos artefactos. No permite recuperar procesos internos ocultos ni demostrar todas las fuentes que influyeron en una respuesta. Es un protocolo de trabajo, no una función automática anunciada de Mentio.
Delimita la superficie y la pregunta de auditoría
Empieza por identificar qué estás observando: una conversación en una aplicación, una respuesta de API o un sistema propio que coordina varias herramientas. No mezcles esas superficies en la misma columna de evidencia. Que un proveedor ofrezca búsqueda en su API no demuestra que una conversación concreta de su aplicación haya seguido el mismo recorrido.
Formula una pregunta verificable. «¿Hay una llamada de búsqueda en el registro completo de esta ejecución?» es distinta de «¿la página de nuestra marca fue recuperada?» y de «¿la cita respalda esta afirmación?». Cada una exige evidencia diferente; resolver la primera no resuelve las otras.
Fija también la frontera del expediente. Si solo recibes la salida final de un servicio intermediario, anota que no ves las herramientas que este pueda usar. No conviertas la falta de acceso a su registro en una conclusión sobre lo que hizo. La unidad será esa ejecución observable, no el comportamiento general del modelo.
Conserva la ejecución antes de resumirla
Asigna un identificador local y guarda la fecha con zona horaria, la pregunta exacta y el contexto autorizado que pueda cambiar el resultado. Registra proveedor, superficie, versión de API o SDK cuando se conozca, modelo declarado y modo. Si un campo no se expone, déjalo como desconocido.
Conserva la configuración enviada y la respuesta recibida antes de extraer un resumen. En una captura por eventos, guarda la secuencia y el estado terminal que puedas verificar. El texto final por sí solo puede perder llamadas o anotaciones que estaban en otras partes del artefacto. Un registro cortado no debe adquirir apariencia de completo al convertirlo en una tabla limpia.
Separa ejecución, intento y artefacto. Un reintento puede producir otra respuesta y otro recorrido; no uses sus eventos para rellenar silenciosamente huecos del primer intento. El registro de fallos de captura y cobertura explica cómo conservar ese linaje. Aquí lo utilizamos para que una conclusión sobre búsqueda se refiera al intento correcto.
No confundas disponibilidad con llamada observada
Guarda por separado si la herramienta estaba disponible, qué controles se enviaron y qué evento volvió. Una configuración con búsqueda habilitada describe una posibilidad o una instrucción, según el contrato de esa integración. No es, por sí misma, la prueba de que la llamada se completó.
Para una llamada observada, conserva su tipo nativo, identificador si existe, acción, argumentos expuestos, orden dentro del registro y estado. No generes consultas a partir de palabras de la respuesta para completar un campo ausente. Tampoco cuentes como llamadas independientes los fragmentos de transmisión del mismo evento si puedes reconstruir su identidad.
Mantén separados «llamada registrada», «resultado devuelto» y «respuesta terminada». Si la herramienta falla y el asistente responde de todas formas, conserva ambos hechos. La respuesta no convierte el fallo anterior en una recuperación correcta ni demuestra que el texto proceda de esa búsqueda fallida.
Lee los campos del contrato que realmente utilizaste
En Responses, la documentación de búsqueda de OpenAI distingue eventos web_search_call, acciones como search y anotaciones url_citation en el mensaje. Documenta también include: ["web_search_call.action.sources"] para devolver fuentes. Las consultas pueden no aparecer. Conserva los campos presentes sin inventar los ausentes.
La guía actual de Google Search en Gemini muestra en Interactions pasos google_search_call con consultas, google_search_result con sugerencias y anotaciones de citas en el texto. Es el esquema de esa integración; no lo impongas a una respuesta de otro endpoint ni a la aplicación de consumo.
Revisa la documentación correspondiente a la versión capturada antes de escribir el extractor. Conserva una copia o referencia fechada del contrato y una muestra autorizada del artefacto. Si cambia la estructura, añade una nueva versión de extracción; no interpretes un campo que dejó de leerse como si el proveedor hubiera dejado de buscar.
Relaciona eventos, fuentes y citas sin inventar uniones
Construye relaciones que puedas reconstruir. Empieza por ejecución e intento, después evento y consulta expuesta, fuente devuelta y marcador de cita. Usa identificadores o vínculos explícitos cuando existan. Si el registro solo aporta una lista de fuentes para toda la ejecución, no atribuyas cada URL a una consulta concreta por proximidad o parecido de palabras.
| Registro | Qué conservar | Qué no demuestra por sí solo |
|---|---|---|
| Configuración | Herramientas y controles enviados | Que se ejecutara una llamada |
| Evento | Tipo, identidad, acción y estado expuestos | Que toda página candidata se leyera completa |
| Consulta | Texto expuesto y relación documentada | Todas las reformulaciones internas posibles |
| Fuente | URL y alcance del campo que la devuelve | Que fuera citada o determinante |
| Cita | Marcador, destino y segmento de respuesta | Que el pasaje sostenga la afirmación |
| Captura | Estado terminal y límites del artefacto | Actividad fuera de la superficie observada |
Conserva la URL original además de cualquier versión normalizada para agrupar. Quitar parámetros o unir hosts puede facilitar un recuento, pero también confundir documentos diferentes. Si falta la relación entre dos objetos, registra «no vinculable con este artefacto», en lugar de fabricar una cadena completa.
Para las citas, comprueba el segmento contra el texto exacto al que pertenecen sus posiciones o marcadores. Una traducción, una limpieza de formato o la unión de bloques puede moverlo. La auditoría de soporte entre afirmación y pasaje viene después: una asociación visible no acredita todavía soporte semántico.
Distingue ausencia observable de captura insuficiente
Define los estados antes de contar. Puedes registrar «búsqueda observada», «sin evento de búsqueda en un registro aceptado», «captura incompleta» y «superficie sin detalle de herramientas». Las etiquetas son propuestas operativas de esta guía, no estados oficiales universales.
El segundo estado exige que hayas aceptado el artefacto como completo para la pregunta y la integración auditadas. Aun así, su conclusión se limita al registro expuesto: no afirma que no hubiera ninguna recuperación interna o actividad ajena a esa superficie. Si el contrato no permite comprobar la ausencia, no fuerces ese estado.
Una cita sin evento visible puede quedar como «cita observada; recorrido no verificable». Una llamada con consulta ausente sigue siendo una llamada observada, pero no autoriza un análisis del texto de las consultas. Trata cada dato desconocido donde corresponde, sin descartar toda la ejecución ni rellenar todos sus campos por analogía.
Compara recuentos con denominadores explícitos
Entrega primero ejecuciones planificadas, intentos, artefactos aceptados y casos sin observabilidad suficiente. Después cuenta ejecuciones con búsqueda observada, eventos y consultas expuestas como unidades diferentes. Una ejecución puede contener varias llamadas; sus fragmentos no deben multiplicar el número de ejecuciones.
Si informas una proporción de búsqueda observada entre registros aceptados y comparables, muestra ambos recuentos y cuántas unidades quedaron fuera. No la llames frecuencia de búsqueda de todos los usuarios. Tampoco compares proveedores si uno expone llamadas y otro solo citas, o si has cambiado los criterios de aceptación entre periodos.
Separa además fuentes devueltas, URLs únicas y citas. Deduplicar URLs responde a una pregunta distinta de contar apariciones. Una caída de fuentes en tu tabla puede proceder de un cambio del extractor, una captura truncada o un cambio observable de la respuesta; revisa esas posibilidades antes de atribuirla a la conducta del asistente.
Cierra el expediente con una conclusión limitada
Entrega un índice de artefactos, versión del extractor, reglas de aceptación, relaciones comprobadas y casos pendientes. La conclusión debe señalar qué evento se observó, en qué ejecución y qué parte no puedes reconstruir. Evita convertir esa ficha en una explicación causal de por qué la marca apareció o quedó fuera.
La auditoría de acceso de crawlers verifica otra capa: peticiones a tu infraestructura. Un evento de búsqueda del asistente no prueba una visita nueva a tu servidor, ni un log de servidor identifica automáticamente la ejecución del usuario. Cruza ambas capas solo cuando tengas una relación verificable y conserva la incertidumbre restante.
Guarda únicamente material autorizado para esta revisión. No incluyas credenciales, cookies, firmas de sesión ni razonamiento privado en un informe compartido. Mantén el original protegido cuando proceda y una copia de trabajo con las supresiones documentadas. El siguiente revisor necesita evidencia suficiente para comprobar la conclusión, no acceso innecesario a toda la conversación.
Preguntas frecuentes
¿Un enlace en la respuesta demuestra que el asistente buscó? Demuestra que hay un enlace visible. Para acreditar una llamada concreta necesitas el evento o la evidencia que exponga esa integración; el enlace solo no reconstruye su recorrido.
¿Si no veo una llamada puedo afirmar que no hubo búsqueda? No de forma general. Distingue un registro completo sin evento expuesto, una captura incompleta y una superficie que no muestra herramientas. Limita la conclusión al artefacto que puedes revisar.
¿Puedo aplicar una prueba de API a la aplicación del mismo proveedor? No como si fueran la misma ejecución. Registra superficie, configuración y versión por separado; una prueba de API no demuestra el recorrido de una conversación en la aplicación.
¿Una fuente devuelta ya cuenta como una cita respaldada? No. Conserva por separado la fuente, su eventual cita y la revisión del pasaje que sostiene la afirmación. Son relaciones y comprobaciones diferentes.
¿Qué hago si falta parte del registro de eventos? Marca la captura como incompleta para las preguntas que dependan de esa parte. Conserva lo observado y cualquier reintento como otro intento, sin completar retroactivamente el original.
¿Quieres saber si la IA menciona tu marca?
Descubre tu visibilidad en ChatGPT, Claude y Gemini en minutos.
Artículos relacionados
Fallos de captura GEO: intentos y cobertura válida
Registra fallos de captura, relaciona reintentos y concilia unidades válidas con el plan sin contar errores como ausencia de marca ni inflar la muestra.
Analítica GEOLa cita respalda la respuesta: auditoría de afirmaciones y pasajes en IA
Comprueba si cada cita respalda una afirmación de IA: pasajes versionados, soporte completo, parcial, ausente o contradictorio y registro de revisión.
Guías prácticasAuditoría de crawlers de IA: cómo comprobar acceso con logs, robots.txt y llms.txt
Comprueba qué crawlers de IA acceden a tu web, valida su identidad y detecta bloqueos en robots.txt, CDN, WAF, logs y contenido renderizado.