Contacta con nosotros

Temario del curso

Introducción al Aprendizaje por Refuerzo a partir de Retroalimentación Humana (RLHF)

  • ¿Qué es el RLHF y por qué es importante?
  • Comparación con métodos de ajuste fino supervisado
  • Aplicaciones del RLHF en sistemas de inteligencia artificial modernos

Modelado de recompensas con retroalimentación humana

  • Recopilación y estructuración de la retroalimentación humana
  • Construcción y entrenamiento de modelos de recompensa
  • Evaluación de la eficacia del modelo de recompensa

Entrenamiento con Optimización por Política Próxima (PPO)

  • Visión general de los algoritmos PPO para RLHF
  • Implementación de PPO con modelos de recompensa
  • Ajuste fino iterativo y seguro de los modelos

Ajuste fino práctico de modelos de lenguaje

  • Preparación de conjuntos de datos para flujos de trabajo de RLHF
  • Ejercicio práctico de ajuste fino de un LLM pequeño utilizando RLHF
  • Desafíos y estrategias de mitigación

Escalabilidad del RLHF en sistemas de producción

  • Consideraciones de infraestructura y poder computacional
  • Aseguramiento de la calidad y bucles de retroalimentación continua
  • Mejores prácticas para el despliegue y mantenimiento

Consideraciones éticas y mitigación del sesgo

  • Abordaje de los riesgos éticos en la retroalimentación humana
  • Estrategias de detección y corrección de sesgos
  • Aseguramiento de la alineación y seguridad de las salidas

Casos de estudio y ejemplos del mundo real

  • Caso de estudio: Ajuste fino de ChatGPT con RLHF
  • Otros despliegues exitosos de RLHF
  • Lecciones aprendidas e insights de la industria

Resumen y próximos pasos

Requerimientos

  • Comprensión de los fundamentos del aprendizaje supervisado y del aprendizaje por refuerzo
  • Experiencia en el ajuste fino de modelos y arquitecturas de redes neuronales
  • Conocimiento básico de la programación en Python y frameworks de aprendizaje profundo (por ejemplo, TensorFlow, PyTorch)

Audiencia

  • Ingenieros de aprendizaje automático
  • Investigadores de inteligencia artificial
 14 Horas

Número de participantes


Precio por participante

Próximos cursos

Categorías Relacionadas