Teleformación 20h
Avanzado
100% Bonificable FUNDAE*
LLMOps: Evaluación, Monitorización y Costes de IA
Operaciones de modelos de lenguaje en producción: cómo evaluar la calidad de los outputs de forma sistemática, monitorizar el comportamiento de los sistemas IA, controlar los costes y asegurar la fiabilidad.
Dirigido a: Ingenieros de ML y LLM en producción, Equipos que operan sistemas IA críticos, CTOs con sistemas IA en producción, Responsables de calidad en productos con IA
Objetivos
- Implementar un pipeline de evaluación automática de calidad de LLM outputs en producción
- Reducir los costes de inferencia en al menos un 30% mediante estrategias de optimización
- Establecer un sistema de observabilidad para detectar degradación de calidad en tiempo real
- Gestionar incidentes de sistemas IA con protocolos definidos y tiempo de respuesta conocido
Programa
01
Módulo 1: Fundamentos de LLMOps 3h
02
Módulo 2: Evaluación sistemática de outputs 5h
03
Módulo 3: Control de costes 4h
04
Módulo 4: Observabilidad avanzada 4h
05
Módulo 5: Incidentes y gestión del riesgo 4h
Entregables
- Pipeline de evaluación automática implementado y conectado al sistema productivo
- Dashboard de observabilidad LLM con métricas de coste, latencia y calidad
- Estrategias de optimización de costes documentadas y aplicadas
- Runbook de incidentes para sistemas IA
Solicitar información
Duración: 20 horas
Modalidad: Teleformación
Bonificable FUNDAE*
*La bonificación depende del crédito FUNDAE disponible.