Otimização e Eficiência Computacional

Otimização de Memória por Gradient Checkpointing

Técnica de gerenciamento de memória que salva seletivamente as ativações intermediárias durante a retropropagação, recalculando-as quando necessário para trocar uma redução no uso de RAM por um ligeiro aumento no tempo de computação.

← Voltar