Por qué tu asistente de IA se equivoca (y cómo se construye uno fiable)

  • #fiabilidad
  • #agentes
  • #memoria
  • #casos-reales
Fiabilidad de un asistente de IA: esquirlas de datos que fluyen hacia una lente de luz; las vigentes se alinean en un haz claro y las caducadas se filtran a un lado, claridad frente al ruido.

Imagina esto. Llevas meses usando un asistente de IA conectado a tu correo. Un día le preguntas: «¿quién es mi contacto actual para este tema?» Y te responde, con total seguridad y muy buena redacción… el contacto de hace un mes. El anterior. El que ya no es.

El dato correcto estaba en tu correo. El asistente lo tenía. Y aun así respondió mal.

Esto no es una historia hipotética: nos pasó con Teo, el asistente que usamos cada día en Ayudeo, y es de los fallos más caros que puede tener un agente — porque no parece un fallo. No da error. No dice «no lo sé». Te da información desactualizada con cara de información buena. Si en ese momento estás delante de un cliente, la credibilidad del asistente (y la tuya) se ha ido en una frase.

Arreglarlo de verdad nos obligó a entender por qué pasa. Y la respuesta sirve para cualquier negocio que se plantee un agente de IA.

La trampa: tu historial guarda TODAS las versiones de tu vida

Tu correo y tus documentos no guardan «la verdad»: guardan todas las verdades que han existido. El proveedor de antes y el de ahora. La tarifa de 2023 y la de este año. La persona que llevaba tu cuenta y la que la lleva desde el mes pasado.

Cuando un asistente busca en ese historial, encuentra una respuesta que encaja con tu pregunta. El problema es que «encajar» no es «estar vigente». Y un modelo de lenguaje, por listo que sea, no tiene forma de saber qué es verdad hoy si nadie se lo dice: solo ve textos, y el texto viejo se parece muchísimo al nuevo.

Peor aún: los asistentes con memoria «aprenden» cosas de tus conversaciones. Esa memoria también envejece. Lo que aprendió en junio puede ser mentira en julio — y lo defenderá como verdad, porque nadie se la ha curado.

Las 4 reglas que usamos para que un agente sepa qué es verdad hoy

Después de aquel susto reconstruimos la fiabilidad de Teo por capas, y lo destilamos en cuatro reglas. Hoy son el estándar con el que construimos cada asistente:

1. Todo dato que caduca lleva fecha y una única fuente de la verdad. Un contacto, una tarifa, una dirección, un horario: se registran como «valor + desde cuándo + de dónde sale», en un sitio único. Cuando cambia, se actualiza ahí. El asistente no «recuerda» tu situación actual: la consulta.

2. La memoria del asistente se revisa, porque lo aprendido envejece. La memoria de un agente es un activo solo si se cura. La nuestra se repasa: lo obsoleto se marca como histórico («esto FUE así hasta tal fecha») en vez de quedarse compitiendo con lo vigente.

3. Las comprobaciones críticas van en código, no en confiar en que la IA lo hará bien. «¿Cuál es el más reciente?» no se le pregunta al modelo: lo calcula el sistema, comparando fechas, siempre igual, y le entrega el resultado ya etiquetado como vigente. Las instrucciones en el prompt guían; el código garantiza. Todo lo que sea crítico para tu negocio debe estar en la parte que garantiza.

4. Cuando lo nuevo contradice lo viejo, gana lo más reciente — por regla explícita. No por suerte del buscador, no porque el modelo esté fino ese día. Regla fija: ante dos versiones del mismo hecho, la de fecha más reciente manda, y la vieja queda como contexto histórico.

El resultado (y cómo lo comprobamos)

Con las cuatro reglas en marcha, repetimos la pregunta trampa — la misma que había fallado, incluso escrita con erratas y sin dar pistas. El asistente respondió el contacto vigente, con su fecha, y explicó que el anterior era un proceso ya cerrado.

Un detalle de método que aplicamos a todo: no damos nada por arreglado porque «el cambio está hecho» — se comprueba contra el sistema vivo, con la pregunta real, y solo entonces se cierra. Ese hábito (verificar en producción, no en la teoría) evita más disgustos que cualquier modelo de moda.

Qué significa esto si estás pensando en un agente para tu negocio

Cuando evalúes un asistente de IA — el nuestro o cualquiera — pregunta esto:

  • ¿Dónde viven los datos que caducan (contactos, tarifas, condiciones), y tienen fecha?
  • ¿Qué pasa cuando el historial contradice el presente? ¿Quién gana, y por qué regla?
  • ¿La memoria del asistente se revisa, o acumula para siempre?
  • ¿Las comprobaciones críticas están en código, o son una instrucción más en el prompt?

Si el proveedor no sabe contestar, la demo te está enseñando el mejor día del asistente. Nosotros preferimos enseñarte el día difícil: es donde se gana la confianza.

¿Quieres un asistente construido así, sobre tu correo, tus documentos y tu forma de trabajar? Hablemos.

¿Te suena tu caso?

Cuéntanos qué te gustaría dejar de hacer y vemos si un asistente de IA encaja — sin compromiso.