Firmar con un proveedor de agentes de IA es solo el principio de la relación. Lo que de verdad determina si esa inversión sigue teniendo sentido a los tres, seis o doce meses es lo que ocurre después: si recibes un informe mensual con datos concretos que te permiten decidir, o un correo genérico que dice que "todo va bien" sin una sola cifra que lo respalde. Este artículo no trata de cómo medir el resultado de un agente en general, algo que ya cubrimos en cómo se miden los resultados de un agente de IA; trata de algo más concreto y menos hablado: qué debe traer, mes a mes, el informe de seguimiento de tu proveedor, y qué significa que no lo traiga.
Por qué el informe mensual es el verdadero termómetro de la relación
Un proyecto de IA no se juzga por la demo inicial ni por la promesa comercial, se juzga por su rendimiento sostenido en el tiempo. Un agente puede funcionar razonablemente bien el primer mes y degradarse después porque cambia el volumen, cambia el proceso o cambia el propio modelo subyacente sin que nadie lo revise. El informe mensual es el único mecanismo que te permite detectar ese deterioro antes de que se convierta en un problema visible para tus clientes o tu equipo. Si tu proveedor no tiene un ritual mensual de reporte, en la práctica estás operando a ciegas entre factura y factura.
Los KPIs operativos que no pueden faltar
Estos son los datos de actividad que cualquier informe serio debe incluir, sin que tengas que pedirlos expresamente cada vez:
- Volumen gestionado en el mes, y su evolución respecto al mes anterior, para saber si el agente está absorbiendo el crecimiento real de tu negocio.
- Porcentaje de casos resueltos sin intervención humana, desglosado por tipo de caso si el proceso tiene varias ramas, no como una única cifra global que puede esconder un problema en un segmento concreto.
- Tiempo medio de respuesta o de resolución, comparado con el mes previo, no solo con la cifra de referencia del día uno.
- Tasa de escalado a una persona, y motivo del escalado agrupado por categorías, porque un aumento de escalados sin explicación es la primera señal de que algo se ha roto en el proceso.
Los KPIs de servicio y disponibilidad
Un agente de IA es, ante todo, un servicio que debe estar disponible cuando tu empresa lo necesita. El informe mensual debería reflejar:
- Disponibilidad o uptime del servicio durante el período, con las franjas de caída si las ha habido.
- Incidencias registradas, con tiempo de detección y tiempo de resolución de cada una, no solo el número total.
- Cumplimiento de los acuerdos de nivel de servicio (SLA) pactados en el contrato, comparando lo prometido con lo entregado ese mes concreto.
- Cambios relevantes en el sistema, como una actualización del modelo subyacente o una modificación de las reglas del agente, para que sepas qué ha cambiado antes de notar un comportamiento distinto sin explicación.
Los KPIs económicos que justifican la factura
Más allá de lo operativo, el informe debe permitirte responder a la pregunta que tarde o temprano te hará dirección: ¿esto sigue mereciendo la pena?
- Coste por caso gestionado o por interacción, para poder compararlo con el coste que tenía el proceso manual antes de automatizarlo.
- Horas de trabajo humano liberadas en el mes, traducibles a un ahorro estimado con el coste por hora de tu equipo.
- Uso real frente a lo contratado, especialmente relevante en modelos de precio por volumen de tokens o de casos, donde puedes estar pagando de más por una capacidad que no llegas a utilizar, o quedarte corto y generar sobrecostes inesperados.
Señales de alarma en un informe mensual
Hay patrones que deberían hacerte desconfiar aunque el informe llegue puntual cada mes:
- Cifras redondeadas sin desglose, del tipo "hemos gestionado cientos de casos con gran éxito", sin un número exacto ni una fuente verificable.
- Ausencia de comparación temporal. Un dato aislado del mes en curso, sin la serie de meses anteriores al lado, impide ver si la tendencia es buena o mala.
- El mismo texto genérico mes tras mes, cambiando solo la fecha, señal de que nadie está revisando realmente los datos antes de enviarlos.
- Ningún dato negativo nunca. Ningún sistema de IA funciona perfecto todos los meses; un informe que jamás menciona un problema, una excepción o un margen de mejora es menos creíble que uno que los reconoce y explica cómo se están abordando.
Cómo usar el informe para decidir, no solo para archivar
Recibir el informe no es el objetivo, usarlo sí lo es. Una revisión mensual útil dedica tiempo a comparar la tendencia de los KPIs operativos con la del coste, a preguntar por qué ha subido o bajado un indicador concreto, y a decidir con esos datos si conviene ajustar el alcance del agente, ampliarlo a otro proceso o exigir una mejora concreta al proveedor antes de renovar. Este ritual encaja con lo que ya explicamos sobre qué es un KPI de automatización: un indicador solo tiene valor si alguien lo mira con regularidad y actúa en función de lo que dice, no si simplemente existe en un documento archivado.
Conviene también revisar esto en paralelo con las condiciones contractuales: si tu proveedor exige permanencia larga sin comprometerse a un reporte de esta calidad, la pregunta que planteamos en hay permanencia al contratar agentes de IA cobra todavía más sentido antes de firmar.
Conclusión
El informe mensual de tu proveedor de agentes de IA no debería ser un trámite de cortesía, debería ser la herramienta con la que decides si la inversión sigue teniendo sentido. Volumen, resolución sin intervención, tiempo de respuesta, disponibilidad, cumplimiento de SLA y coste real son los datos mínimos que hay que exigir, mes a mes, con comparación temporal y sin cifras vacías. En MG Solutions incluimos este tipo de reporte desde el primer mes de cualquier proyecto. Reserva una primera reunión si quieres revisar si el informe que estás recibiendo hoy te da de verdad lo que necesitas para decidir.