Glossário IA
O dicionário completo da Inteligência Artificial
Compartilhamento de Peso
Método onde múltiplas conexões neurais compartilham os mesmos parâmetros para reduzir significativamente o número de pesos únicos.
Fatoração de Baixo Rank
Decomposição das matrizes de peso em produtos de matrizes de rank inferior para comprimir as camadas densas da rede.
Decomposição Tensorial
Técnica avançada que fatora tensores de peso convolucionais em tensores mais simples para reduzir a complexidade computacional.
Codificação Esparsa
Representação das ativações com muitos coeficientes nulos, permitindo compressão eficiente e computação acelerada.
Codificação de Huffman
Algoritmo de compressão sem perdas que atribui códigos binários de comprimento variável aos pesos de acordo com sua frequência de ocorrência.
Divisão de Modelo
Divisão de um modelo em segmentos distribuídos entre clientes e servidor para minimizar a comunicação enquanto preserva a confidencialidade.
Binarização de Parâmetros
Conversão dos pesos em valores binários (+1/-1) para reduzir drasticamente a memória e acelerar os cálculos em dispositivos limitados.
Média Federada
Algoritmo de agregação que pondera as atualizações locais dos modelos de acordo com o tamanho dos conjuntos de dados dos clientes para convergência global.
Taxa de Poda do Modelo
Percentual de pesos ou neurones removidos do modelo original, determinando o nível de compressão aplicado.
Treinamento com Consciência de Quantização
Treinamento que incorpora os efeitos da quantização para minimizar a degradação do desempenho pós-compressão.