Glosario IA
El diccionario completo de la Inteligencia Artificial
Refuerzo Continuo
Extensión del aprendizaje por refuerzo donde el agente aprende continuamente nuevas tareas o entornos sin restablecer los conocimientos adquiridos.
Dilema Estabilidad-Plasticidad
Tensión fundamental entre la capacidad de un modelo para adaptarse a nueva información (plasticidad) y su capacidad para conservar los conocimientos existentes (estabilidad).
Aprendizaje Incremental de Tareas
Escenario de aprendizaje continuo donde las tareas se presentan secuencialmente con identificadores de tareas claros durante el entrenamiento y la inferencia.
Aprendizaje Incremental de Dominio
Forma de aprendizaje continuo donde la distribución de los datos cambia gradualmente sin modificación explícita de las tareas o las clases.
Aprendizaje Incremental de Clases
Escenario donde se introducen secuencialmente nuevas clases, lo que requiere la adaptación del clasificador sin acceso a los datos de las clases anteriores.
Búfer de Replay de Memoria
Espacio de almacenamiento limitado que conserva muestras representativas de tareas pasadas para su reutilización durante el aprendizaje de nuevas tareas.
Meta-Aprendizaje Continuo
Enfoque que combina meta-aprendizaje y aprendizaje continuo para desarrollar modelos capaces de aprender rápidamente nuevas tareas mientras preservan las antiguas.
Aprendizaje por Refuerzo de por Vida
Paradigma donde un agente de aprendizaje por refuerzo acumula conocimientos durante un período prolongado, adaptándose continuamente a nuevos entornos y tareas.
Transferencia hacia adelante
Fenómeno en el que el aprendizaje de la tarea actual se beneficia de los conocimientos adquiridos durante las tareas anteriores en un escenario de aprendizaje continuo.
Transferencia hacia atrás
Efecto en el que el aprendizaje de nuevas tareas mejora retroactivamente el rendimiento en las tareas anteriores, ideal pero raro en la práctica.
Aprendizaje sensible a la tarea
Enfoque de aprendizaje continuo donde el sistema tiene conocimiento de la identidad de la tarea actual, permitiendo una especialización más eficiente.
Aprendizaje insensible a la tarea
Escenario de aprendizaje continuo donde el sistema debe identificar implícitamente la tarea actual sin información explícita sobre su identidad.
Aprendizaje por currículo en RL continuo
Estrategia que organiza secuencialmente las tareas de aprendizaje por refuerzo por orden de complejidad creciente para facilitar la adquisición continua de habilidades.
Aprendizaje por refuerzo multi-tarea
Paradigma donde un agente aprende simultánea o secuencialmente a realizar varias tareas diferentes en un entorno de aprendizaje por refuerzo.