قاموس الذكاء الاصطناعي
القاموس الكامل للذكاء الاصطناعي
العزم الأول
المتوسط المتحرك الأسي للتدرجات في Adam، يمثل تقدير العزم الإحصائي الأول (المتوسط) الذي يوجه اتجاه تحديث المعلمات.
العزم الثاني
المتوسط المتحرك الأسي لمربعات التدرجات في Adam، يمثل تقدير العزم الإحصائي الثاني غير المركزي (التباين غير المركزي) الذي يكيف حجم التحديثات.
بيتا1
معامل Adam الفائق الذي يتحكم في معدل الاضمحلال الأسي للمتوسط المتحرك للعزم الأول (التدرج)، وعادة ما يتم تعيينه على 0.9 لتحقيق التوازن بين الحداثة والتاريخ.
بيتا2
معامل Adam الفائق الذي يتحكم في معدل الاضمحلال الأسي للمتوسط المتحرك للعزم الثاني (مربع التدرج)، وعادة ما يتم تعيينه على 0.999 لتقدير مستقر للتباين.
AMSGrad
تعديل لـ Adam يحافظ على الحد الأقصى لتقديرات العزم الثاني لضمان التقارب النظري، متجنبًا الزيادات غير الرتيبة في معدلات التعلم الفعالة.
جدولة الاضمحلال
استراتيجية لتقليل معدل التعلم تدريجيًا في Adam، غالبًا ما تستخدم لتحسين التقارب في المراحل الأخيرة من التدريب عن طريق تقليل حجم الخطوات.