Lo que pasa a los seis meses.
Un sistema de IA se degrada de formas que un desarrollo normal no conoce. Cambia el modelo que usabas y las respuestas se mueven. Entra documentación nueva y el asistente empieza a citar la versión vieja. Sube el volumen y la factura de tokens deja de ser anecdótica.
Por eso montamos desde el primer día el registro de consultas y el conjunto de casos de evaluación. Cuando toca cambiar de modelo, se pasan los casos por el nuevo y se compara con lo que daba el anterior, en lugar de fiarse de que parece que va bien.
El mantenimiento de estos proyectos va aparte del de la web, porque lo que se vigila no tiene nada que ver.
Ver mantenimiento