Prácticas para versionar, desplegar, monitorear y gobernar modelos de machine learning durante su ciclo de vida operativo.
Ejemplo Cada modelo tiene dataset de entrenamiento trazable, métrica de desempeño, control de cambios y monitoreo de drift.
Prácticas para operar aplicaciones basadas en modelos de lenguaje: prompts, evaluaciones, seguridad, costos, observabilidad y versionamiento.
Ejemplo Un asistente empresarial registra versiones de prompt, latencia, costo por respuesta, fuentes usadas y resultados de evaluación.
Repositorio gobernado de variables reutilizables para entrenamiento e inferencia, diseñado para consistencia, trazabilidad y reutilización.
Ejemplo La variable recurrencia de compra se calcula una vez y se usa igual en entrenamiento, scoring y monitoreo.
Patrón donde un modelo genera respuestas usando información recuperada desde fuentes externas relevantes y controladas.
Ejemplo Un asistente consulta políticas internas actualizadas antes de responder sobre vacaciones, compras o cumplimiento.
Representaciones numéricas de textos, imágenes u otros objetos que permiten comparar similitud semántica.
Ejemplo Dos documentos con palabras distintas pueden quedar cerca en el espacio vectorial si hablan del mismo problema.
Sistema diseñado para almacenar embeddings y encontrar elementos semánticamente cercanos con baja latencia.
Ejemplo El buscador del asistente encuentra contratos parecidos aunque el usuario no escriba las palabras exactas.
Pérdida de desempeño de un modelo cuando cambian los datos, el comportamiento de usuarios, el contexto o la relación entre variables.
Ejemplo Un modelo de demanda entrenado antes de una nueva política comercial empieza a subestimar compras recurrentes.
Proceso para medir si un prompt produce respuestas correctas, útiles, consistentes, seguras y alineadas con el negocio.
Ejemplo Cada cambio de prompt se prueba contra casos críticos antes de llegar al asistente usado por clientes.
Controles que reducen respuestas inseguras, incorrectas o fuera de alcance mediante políticas, filtros, validaciones y límites operativos.
Ejemplo El asistente no ejecuta una acción financiera si no confirma identidad, permisos y reglas del proceso.