Temario del curso
1. Introducción al Aprendizaje por Refuerzo Profundo
- ¿Qué es el Aprendizaje por Refuerzo?
- Diferencia entre Aprendizaje Supervisado, No Supervisado y Aprendizaje por Refuerzo
- Aplicaciones del DRL en 2025 (robótica, salud, finanzas, logística)
- Comprensión del bucle de interacción agente-entorno
2. Fundamentos del Aprendizaje por Refuerzo
- Procesos de Decisión de Markov (MDP)
- Estado, Acción, Recompensa, Política y funciones de Valor
- Compromiso entre Exploración y Explotación
- Métodos de Monte Carlo y Aprendizaje Temporal-Diferencia (TD)
3. Implementación de Algoritmos Básicos de RL
- Métodos tabulares: Programación Dinámica, Evaluación de Política e Iteración
- Q-Learning y SARSA
- Exploración epsilon-greedy y estrategias de decaimiento
- Implementación de entornos de RL con OpenAI Gymnasium
4. Transición al Aprendizaje por Refuerzo Profundo
- Limitaciones de los métodos tabulares
- Uso de redes neuronales para la aproximación de funciones
- Arquitectura y flujo de trabajo de Deep Q-Network (DQN)
- Reutilización de experiencias (Experience Replay) y redes objetivo
5. Algoritmos Avanzados de DRL
- Double DQN, Dueling DQN y Reutilización de Experiencias Priorizada
- Métodos de Gradiente de Política: algoritmo REINFORCE
- Arquitecturas Actor-Crítico (A2C, A3C)
- Optimización de Política Proximal (PPO)
- Soft Actor-Critic (SAC)
6. Trabajo con Espacios de Acción Continuos
- Desafíos en el control continuo
- Uso de DDPG (Deep Deterministic Policy Gradient)
- Twin Delayed DDPG (TD3)
7. Herramientas y Marcos de Trabajo Prácticos
- Uso de Stable-Baselines3 y Ray RLlib
- Registro y monitoreo con TensorBoard
- Ajuste de hiperparámetros para modelos de DRL
8. Ingeniería de Recompensas y Diseño de Entornos
- Moldeado de recompensas y equilibramiento de penalizaciones
- Conceptos de transferencia de aprendizaje sim-to-real
- Creación de entornos personalizados en Gymnasium
9. Entornos Parcialmente Observables y Generalización
- Manejo de información de estado incompleta (POMDPs)
- Enfoques basados en memoria utilizando LSTMs y RNNs
- Mejora de la robustez y generalización del agente
10. Teoría de Juegos y Aprendizaje por Refuerzo Multi-Agente
- Introducción a los entornos multi-agente
- Cooperación vs. Competencia
- Aplicaciones en entrenamiento adversarial y optimización de estrategias
11. Estudios de Caso y Aplicaciones en el Mundo Real
- Simulaciones de conducción autónoma
- Fijación dinámica de precios y estrategias de trading financiero
- Robótica y automatización industrial
12. Solución de Problemas y Optimización
- Diagnóstico de entrenamiento inestable
- Gestión de la rareza de recompensas y sobreajuste (overfitting)
- Escalado de modelos de DRL en GPUs y sistemas distribuidos
13. Resumen y Próximos Pasos
- Repaso de la arquitectura de DRL y algoritmos clave
- Tendencias de la industria y direcciones de investigación (p. ej., RLHF, modelos híbridos)
- Recursos adicionales y material de lectura
Requerimientos
- Dominio de la programación en Python
- Comprensión de Cálculo y Álgebra Lineal
- Conocimientos básicos de Probabilidad y Estadística
- Experiencia en la construcción de modelos de aprendizaje automático utilizando Python y NumPy o TensorFlow/PyTorch
Público Objetivo
- Desarrolladores interesados en IA y sistemas inteligentes
- Científicos de datos que exploran marcos de trabajo de aprendizaje por refuerzo
- Ingenieros de Aprendizaje Automático que trabajan con sistemas autónomos
Formación Corporativa a Medida
Soluciones de formación diseñadas exclusivamente para empresas.
- Contenido personalizado: Adaptamos el temario y los ejercicios prácticos a los objetivos y necesidades reales del proyecto.
- Calendario flexible: Fechas y horarios adaptados a la agenda de su equipo.
- Modalidad: Online (en directo), In-company (en sus oficinas) o Híbrida.
Precio por grupo privado (formación online) desde 4350 € + IVA*
Contáctenos para obtener un presupuesto exacto y conocer nuestras promociones actuales
Reseñas (3)
Me gustó mucho el final donde tuvimos la oportunidad de experimentar con CHAT GPT. La sala no estaba muy bien preparada para esto; en lugar de una gran mesa, varias mesas pequeñas nos habrían permitido formar grupos pequeños y generar ideas de manera más efectiva.
Nola - Laramie County Community College
Curso - Artificial Intelligence (AI) Overview
Traducción Automática
Trabajando desde principios fundamentales de manera enfocada y pasando a aplicar estudios de caso en el mismo día
Maggie Webb - Department of Jobs, Regions, and Precincts
Curso - Artificial Neural Networks, Machine Learning, Deep Thinking
Traducción Automática
Sentí que estábamos avanzando a buen ritmo con información directamente relevante (es decir, sin material de relleno)
Maggie Webb - Department of Jobs, Regions, and Precincts
Curso - Introduction to the use of neural networks
Traducción Automática