モメンタム
モーメンタム係数(ベータ)
現在の更新に対する過去の勾配の影響を制御するハイパーパラメータで、通常0.9から0.99の間に設定されます。値が高いほど慣性を増やし、狭い谷での最適化軌道を安定させます。
← 戻る現在の更新に対する過去の勾配の影響を制御するハイパーパラメータで、通常0.9から0.99の間に設定されます。値が高いほど慣性を増やし、狭い谷での最適化軌道を安定させます。
← 戻る