Оптимизация и вычислительная эффективность

Оптимизация памяти через Gradient Checkpointing

Техника управления памятью, которая выборочно сохраняет промежуточные активации при обратном распространении, пересчитывая их по мере необходимости для обмена уменьшенного использования RAM на небольшое увеличение времени вычислений.

← Назад