Si no lo has dejado por escrito, lo más probable es que nadie vigile el data drift. Lo razonable es repartirlo: el proveedor mide, compara y avisa porque tiene los medios técnicos; tú aportas lo que cambia en tu negocio y decides qué hacer, porque solo tú sabes si un cambio es normal o es un problema. Y todo eso debe constar en el contrato como una cláusula de mantenimiento, con un informe periódico que llegue sin tener que pedirlo.
El data drift es el desfase entre los datos con los que un agente fue preparado y los datos reales que recibe hoy. No hace ruido: el agente sigue funcionando, solo que acierta un poco menos cada mes. Si necesitas la definición con calma, la tienes en qué es el data drift y cómo afecta a tus modelos de IA. Aquí vamos a lo práctico: de quién es la tarea de detectarlo. En una gran empresa hay un equipo con responsabilidades escritas. En una pyme, lo habitual es que el proveedor crea que lo vigila el cliente y el cliente crea que lo vigila el proveedor.
¿Quién vigila qué? Un reparto sencillo
Un reparto que funciona en la mayoría de proyectos pequeños es este:
- El proveedor vigila lo técnico: mide cada cierto tiempo cómo acierta el agente, compara los datos que llegan ahora con los de antes, detecta cambios bruscos y avisa. También propone y aplica los ajustes.
- Tú vigilas lo que ocurre fuera de la vista del proveedor: nuevos productos, cambios de precios, campañas, una norma nueva, un cliente grande que cambia su forma de pedir. Se lo cuentas antes de que afecte, no después.
- Los dos revisáis juntos los resultados y acordáis qué se hace. La decisión final sobre cambiar el agente, ampliar su trabajo o pararlo es tuya.
La clave del reparto es que ninguna de las dos partes puede hacer bien el trabajo de la otra. El proveedor no sabe que mañana lanzas un producto; tú no sabes leer las métricas de acierto. Cuando falta una de las dos mitades, el desfase se descubre tarde, cuando ya lo nota un cliente.
¿Qué informe debe llegar y con qué frecuencia?
El informe debe ser corto, en lenguaje llano y llegar solo, sin que lo pidas. Debe responder a cinco preguntas: qué se ha medido, cómo está el acierto frente al periodo anterior, qué ha cambiado en los datos que llegan, qué incidencias ha habido y qué se recomienda hacer. Si una respuesta es «nada», que lo diga: un informe en el que no pasa nada también es información.
En cuanto a la frecuencia, lo habitual es combinar tres ritmos: un resumen breve cada mes, una revisión más amplia cada trimestre que puedes apoyar en la auditoría trimestral de tus agentes, y un aviso inmediato cuando algo se salga de lo esperado. Los ritmos concretos los fijáis según la importancia del agente: uno que atiende a clientes todos los días merece más atención que uno que prepara un informe semanal.
Un consejo para leer los informes: antes de preocuparte por un cambio, comprueba si es temporada o deriva real. Lo explicamos en cambio de temporada o data drift: cómo distinguirlos.
Qué cláusula de mantenimiento incluir en el contrato
No te damos un texto legal, que debe redactar y revisar tu asesor, pero sí una lista de lo que conviene que recoja, dicho en palabras sencillas:
- Qué se vigila. Que el proveedor mida de forma periódica el acierto del agente y los cambios en los datos que recibe.
- Cada cuánto y en qué formato. La frecuencia del informe y qué contiene, con un ejemplo adjunto.
- Cuándo avisa. Qué situación obliga al proveedor a avisarte sin esperar al informe y en cuánto tiempo.
- Quién actúa y quién paga. Si se detecta deriva, quién propone el ajuste, en qué plazo y si está incluido en la cuota o se factura aparte.
- Cambios del proveedor. Que te avise con antelación si cambia el modelo o el servicio en que se apoya el agente, porque eso también puede alterar su comportamiento.
- Tu parte. Qué debes comunicar tú (cambios de productos, tarifas, procesos) y por qué canal.
- Acceso a los datos de seguimiento y salida. Que puedas ver las mediciones y llevarte el histórico si cambias de proveedor.
Un buen punto de partida para todo lo demás está en acuerdo de servicio con un proveedor de IA: qué exigir por escrito. Si algún dato personal interviene, la parte de protección de datos del contrato la revisa tu asesor.
¿Y si tu proveedor no incluye ninguna vigilancia?
Entonces la vigilancia recae en ti, y es mejor hacerla sencilla que no hacerla. Con una hora al mes puedes ir muy lejos: pide que una persona del equipo revise a mano una muestra pequeña de lo que ha hecho el agente, siempre con el mismo criterio, y anota cuántas veces ha acertado y qué errores se repiten. Compara mes a mes. Pregunta también al equipo que usa el agente si notan que falla en algo que antes hacía bien: quien trabaja con él cada día suele detectar el desvío antes que cualquier gráfico.
Cuando veas un patrón, comunícaselo al proveedor por escrito. Y valora si te conviene seguir sin una cláusula de mantenimiento: si el agente es importante para el negocio, pedirla en la próxima renovación es razonable. Para entender qué otros motivos pueden explicar el desvío, tienes qué es el drift de un agente de IA en producción.
Qué hace el agente y qué sigue haciendo una persona
En la vigilancia, un agente puede hacer el trabajo pesado: comparar cada día los datos que llegan con los de referencia, anotar los cambios, preparar el informe y avisar si algo se desvía más de lo esperado. Pero hay cosas que seguirán siendo de personas:
- Interpretar. Decidir si un cambio es una novedad normal de tu negocio o un problema.
- Comunicar. Contar al proveedor lo que ha cambiado fuera de los datos.
- Decidir. Aprobar ajustes, ampliar o parar el agente.
- Revisar a mano. Una muestra del trabajo del agente, de vez en cuando, para comprobar que las métricas dicen la verdad.
Ninguna medición sustituye a una persona que conoce el negocio y se pregunta si lo que ve tiene sentido.
Conclusión
El data drift no se vigila solo: o hay un reparto escrito entre proveedor y cliente, o la vigilancia es de nadie. El proveedor mide y avisa, tú aportas los cambios del negocio y decides, y una cláusula de mantenimiento fija qué informe llega, con qué frecuencia y quién actúa y paga cuando se detecta un desfase. Si tu proveedor no lo incluye, una muestra mensual revisada a mano ya es un buen comienzo.
En MG Solutions construimos agentes de IA específicos para cada empresa, adaptados a tu forma de trabajar y a tus herramientas, no una plantilla genérica. Planteamos desde el principio quién vigila qué, para que no quede en tierra de nadie.
Si quieres ver cómo encajaría en tu empresa, escríbenos y lo hablamos.