Fallos de captura GEO: intentos y cobertura válida
Un timeout no demuestra que la marca haya desaparecido. Una respuesta cortada puede mostrar su nombre y seguir siendo insuficiente para comprobar una recomendación. Si ambos casos acaban como un cero o se borran del informe, el indicador mezcla comportamiento del asistente con fallos del sistema que lo observa.
Esta guía propone un registro para equipos que capturan respuestas de IA de forma recurrente. Vincula cada unidad prevista con sus intentos técnicos, los artefactos conservados y la decisión de aceptación. El resultado permite explicar qué se midió y qué quedó fuera, sin convertir los reintentos en observaciones independientes.
El protocolo de variabilidad de respuestas decide cómo repetir preguntas bajo condiciones comparables. Aquí se trabaja dentro de cada repetición ya planificada: recuperar una captura cuando sea procedente y mantener visible su historia.
Fija la unidad prevista y el criterio de aceptación
Asigna un identificador a cada pregunta, versión, configuración, repetición y ventana del plan. Esa combinación identifica una unidad prevista. Un reintento conserva ese identificador; una repetición adicional necesita otro y una razón de diseño, no la etiqueta de reparación.
Define antes de ejecutar qué evidencia exige cada métrica. Para comprobar una posición ordenada puede hacer falta la lista completa; para auditar una cita, el marcador y su destino. Una captura puede servir para una comprobación y no para otra. No le asignes un único estado de validez que oculte esa diferencia.
Fija también el cierre temporal, los límites de espera y la regla para elegir el artefacto aceptado cuando llegue más de uno. Esa regla debe depender de integridad, configuración y orden de intentos, nunca de si aparece la marca. Consérvala junto a la versión del plan para que otro revisor pueda reconstruir la decisión.
Conserva la cadena entre unidad, intento y artefacto
Abre una fila por intento con su propio identificador y el de la unidad prevista. Registra inicio, fin o última observación, zona horaria, entorno y motivo del reintento. Vincula el intento anterior cuando corresponda. No sobrescribas su error al guardar una recuperación posterior.
Conserva la evidencia disponible: respuesta original, estado comunicado por el proveedor, error del capturador y artefactos asociados. Registra solo los campos que el entorno exponga. Si no hay identificador de petición, señal de finalización o contador de consumo, anota que no está disponible en vez de inventarlo.
Mantén separados el archivo recibido, la extracción de texto y las etiquetas analíticas. Un fallo del parser no significa que el proveedor no respondiera. Si puedes corregir la extracción a partir del mismo artefacto autorizado, registra esa nueva versión sin pedir otra respuesta al asistente ni fingir que hubo otra observación.
Clasifica el resultado antes de interpretar la marca
La clasificación siguiente es una propuesta de control de captura, no un catálogo oficial de estados de los proveedores. Adáptala a señales observables y conserva una razón cuando un caso no encaje.
| Estado operativo | Evidencia que debe quedar | Tratamiento en la medición |
|---|---|---|
| No iniciado | Unidad prevista y causa de aplazamiento | Sigue en el plan, sin respuesta atribuida |
| Entrega incierta | Intento enviado sin resultado confirmado | Investigar el mismo intento antes de duplicarlo |
| Captura incompleta | Artefacto parcial y elemento que falta | Evaluar validez por métrica, sin rellenar texto |
| Captura íntegra | Evidencia requerida y configuración reconocida | Aplicar la regla de aceptación acordada |
| Duplicado confirmado | Referencia al mismo evento o artefacto | Conservar linaje, sin otra unidad en el numerador |
| Fuera de ventana | Instante observado y corte aplicable | Registrar aparte según la regla de cierre |
Una negativa del asistente puede ser una respuesta real, no un fallo técnico. Una respuesta completa sin mención de marca tampoco se reintenta por ese motivo. Define cómo entran las negativas en cada métrica y muestra su recuento; no las excluyas retrospectivamente para mejorar una tasa.
Reintenta sin seleccionar la respuesta más favorable
Antes de reenviar, distingue un error confirmado de una entrega incierta. Si el servicio permite consultar una operación ya creada, usa el mecanismo autorizado para saber qué ocurrió. Una espera agotada en tu cliente no prueba por sí sola que la operación remota nunca se ejecutara.
La estrategia de reintentos de Cloud Storage separa la naturaleza del error y la idempotencia de la operación. Esa documentación corresponde a Storage; aquí usamos la distinción como precaución. No demuestra que dos solicitudes a un modelo generativo sean equivalentes o produzcan el mismo texto.
Para APIs que lo expongan, RFC 6585 define 429 como límite de solicitudes y permite indicar Retry-After. RFC 9110 describe ese campo de espera. Respeta la documentación vigente del servicio y tus límites autorizados; no eludas bloqueos, autenticación ni restricciones de uso.
Documenta causas admitidas, espera, máximo de intentos y parada. Evita reintentos simultáneos que sigan consumiendo recursos después de aceptar una captura. Si varias respuestas válidas corresponden a una sola unidad, aplica la regla previa y conserva las demás como historia técnica, no como votos adicionales ni alternativas entre las que elegir.
Concilia plan, intentos y capturas aceptadas
Al cerrar, cada unidad prevista debe tener un estado y, como máximo, un artefacto aceptado por métrica. Comprueba que los intentos se vinculan a unidades existentes y que ninguna captura se ha asignado a dos unidades por error. Conserva los estados anteriores del historial aunque la vista final muestre una recuperación.
Calcula la cobertura en unidades lógicas, no en peticiones: unidades aceptadas para una métrica dentro de la ventana dividido entre unidades previstas para esa misma métrica y ventana. Mantén en el denominador las unidades planificadas que fallaron o no empezaron. Las exclusiones aprobadas antes de ejecutar pertenecen a otra versión del alcance.
Presenta aparte intentos por unidad, fallos observados y recuperaciones. Una tasa de éxito técnico por petición responde una pregunta distinta de la cobertura del plan. Tampoco equivale al consumo facturable: el presupuesto de ejecuciones GEO conserva esas unidades y límites por separado.
No deduzcas duplicación solo porque dos respuestas tengan el mismo texto. Pueden proceder de repeticiones distintas. Usa identificadores y procedencia para demostrar que se trata del mismo evento; cuando no puedas resolverlo, deja el caso pendiente y explica cómo limita el recuento.
Examina dónde se concentra la falta de datos
Desglosa unidades previstas, aceptadas y pendientes por modelo, modo, mercado, idioma, intención y ventana. Añade las dimensiones relevantes de tu diseño. Un total con buena cobertura puede ocultar que una celda importante no produjo ninguna captura utilizable.
Compara las condiciones de las unidades recuperadas con las aceptadas al primer intento. Una recuperación posterior puede ocurrir en otra hora o tras un cambio de versión. No la incorpores como equivalente si ya no cumple el contrato original; conserva la ruptura y decide qué comparación sigue siendo posible.
No supongas que los casos ausentes se parecen a los observados. Si la captura falla más en una configuración o tipo de respuesta, el conjunto válido puede describir una parte distinta del plan. El porcentaje global de cobertura no demuestra ausencia de ese sesgo, y reponderar no recupera una respuesta que nunca se observó.
Muestra la tasa de mención junto al recuento válido y la cobertura de su celda. Su interpretación queda limitada a ese conjunto observado. No rellenes fallos con ceros, con la última respuesta conocida ni con texto generado para completar la tabla.
Cierra la ventana sin borrar las recuperaciones tardías
Conserva una versión del cierre: plan utilizado, hora de corte, reglas de aceptación y estados de cada unidad. Separa capturas pendientes de análisis de capturas pendientes de recepción. Terminar la descarga no significa que ya se haya validado la extracción o la clasificación.
Si llega evidencia después, añade su momento de llegada y la relación con el intento original. Según la regla aprobada, quedará fuera del cierre o dará lugar a una revisión identificada. No cambies silenciosamente el informe anterior ni traslades una observación tardía a otra ventana como si se hubiera ejecutado allí.
Cuando el reintento ya no sea seguro, esté fuera de autorización o agote el límite, conserva el fallo. No necesitas conseguir una respuesta a cualquier coste para cerrar el expediente. La reparación de acceso o configuración requiere su propio responsable y no autoriza a eludir una barrera.
Entrega cobertura verificable antes de evaluar una caída
El paquete de cierre debe incluir unidades previstas y aceptadas por métrica, estados no resueltos, intentos vinculados, artefactos seleccionados y motivos de exclusión. Añade versiones de extracción, reglas de aceptación y diferencias respecto al plan. El revisor debe poder seguir una cifra hasta su unidad sin recorrer una carpeta de archivos sin relación.
Envía las incidencias de captura al responsable de calidad de datos. Las alertas de caída de visibilidad consumen después ese control de cobertura para decidir si pueden evaluar el indicador. Un problema de medición no debe abrirse como una pérdida de presencia de marca.
Este registro puede acompañar una medición gestionada con Mentio; no anuncia una función nueva de reintentos o una garantía de recuperación. Su criterio de cierre es documental: saber qué captura sostiene cada resultado, qué intentos la precedieron y qué parte del plan sigue sin evidencia válida.
Si la métrica depende de si el asistente buscó, añade al artefacto la auditoría de llamadas de búsqueda observables. Una respuesta final válida no basta para acreditar un registro completo de herramientas; la aceptación debe corresponder a la pregunta que vas a medir.
Preguntas frecuentes
¿Un timeout significa que mi marca no apareció? No. Indica que no se obtuvo el resultado esperado dentro del límite observado. No demuestra ausencia de marca ni que la operación remota no se ejecutara; conserva el intento y su estado sin convertirlo en un cero de visibilidad.
¿Un reintento cuenta como otra repetición del prompt? No por sí mismo. Un reintento técnico sigue vinculado a la unidad prevista original. Una repetición adicional necesita su propia unidad y justificación de diseño; no debe introducirse como reparación después de ver una respuesta desfavorable.
¿Puedo usar una respuesta parcial si contiene la marca? Solo para las métricas cuyo criterio previo de aceptación cumpla. Ver el nombre no demuestra que estén completas la recomendación, la lista ordenada o las citas. Conserva qué falta y no reconstruyas el texto ausente.
¿Cómo calculo la cobertura válida de captura? Divide las unidades aceptadas para una métrica y ventana entre las unidades previstas para esa misma métrica y ventana. Cuenta unidades lógicas, no intentos, y muestra aparte fallos, recuperaciones y casos pendientes.
¿Qué hago con una respuesta que llega después del cierre? Conserva su llegada y relación con el intento original. Aplica la regla acordada: dejarla fuera del cierre o emitir una revisión identificada. No modifiques silenciosamente el informe ni la presentes como una ejecución de otra ventana.
¿Quieres saber si la IA menciona tu marca?
Descubre tu visibilidad en ChatGPT, Claude y Gemini en minutos.
Artículos relacionados
Cómo medir la variabilidad de las respuestas de IA sin sesgar tu benchmark
Aprende a repetir prompts, controlar cambios y separar señal de ruido para construir un benchmark fiable de visibilidad de marca en respuestas de IA.
Analítica GEOAlertas de caída de visibilidad en IA: cómo separar ruido de un incidente
Diseña alertas de visibilidad en IA con umbrales, persistencia, severidad, supresión e histéresis para separar ruido de incidentes reales.
Analítica GEOPresupuesto de medición GEO: distribuir ejecuciones sin perder comparabilidad
Planifica el presupuesto de medición GEO por ola: núcleo estable, rotación, reserva y límites de gasto. Documenta la cobertura que sacrificas al recortar.