Glossário IA
O dicionário completo da Inteligência Artificial
Aproximação de função
Técnica usada para estimar funções de valor ou políticas em espaços de estados contínuos, empregando parâmetros ajustáveis ao invés de tabelas explícitas.
Redes neurais de aproximação
Arquiteturas neurais utilizadas como aproximadores universais para representar funções Q ou políticas em espaços de alta dimensão.
Métodos tabulares estendidos
Extensão dos algoritmos clássicos de RL, como Q-learning ou SARSA, para espaços contínuos por meio da aproximação de função ao invés de tabelas de valores.
Espaços de estados contínuos
Ambientes nos quais os estados podem assumir uma infinidade de valores dentro de um intervalo contínuo, exigindo generalização ao invés de memorização.
Deep Q-Network (DQN)
Arquitetura de RL que combina Q-learning com redes neurais profundas para lidar com espaços de estados de alta dimensão, como os pixels de imagens.
Aproximação de função de valor
Método que consiste em estimar V(s) ou Q(s,a) por meio de um aproximador parametrizado θ, para generalizar entre estados semelhantes.
Generalização em RL
Capacidade de um agente de transferir conhecimento aprendido sobre estados observados para estados não vistos, mas semelhantes.
Maldição da dimensionalidade
Fenômeno pelo qual a complexidade computacional cresce exponencialmente com o número de dimensões do espaço de estados.
Extração de características
Processo de transformação de estados brutos em representações informativas adequadas à aproximação de função em RL.
Aproximação linear
Método de aproximação no qual a função de valor é representada como uma combinação linear das características φ(s) com pesos w.
Funções de base radial
Funções de ativação localizadas no espaço de estados, utilizadas como aproximadores universais em RL contínuo.
Estabilidade da convergência
Propriedade que garante que o algoritmo de aproximação converge para uma solução ótima sob certas condições.