قاموس الذكاء الاصطناعي
القاموس الكامل للذكاء الاصطناعي
التحسين المحدب المتدفق
نموذج تحسين حيث تصل البيانات كتيار مستمر ويجب اتخاذ القرارات في الوقت الفعلي دون تخزين جميع الملاحظات.
خوارزمية الانحدار المرآتي
تعميم لانحدار التدرج باستخدام دالة تباعد بريغمان لإجراء التحديثات في الفضاء المزدوج.
مؤثر الإسقاط
عملية رياضية تقوم بإسقاط نقطة على مجموعة محدبة، ضرورية للحفاظ على القيود في التحسين الفوري.
اتبع القائد المنتظم
خوارزمية فورية تحل في كل جولة مشكلة تحسين منتظمة على الخسائر المتراكمة حتى الآن.
خوارزمية أدغراد
مُحسِّن تكيفي يقوم بضبط معدل التعلم لكل معلمة بناءً على مجموع مربعات التدرجات التاريخية.
تحسين RMSprop
خوارزمية تحافظ على متوسط متحرك أسي لمربعات التدرجات لتطبيع تحديثات المعلمات.
دالة خسارة محدبة
دالة خسارة محدبة تضمن وجود حل أمثل عالمي فريد وتقارب خوارزميات التحسين.
طريقة التدرج الفرعي
امتداد لانحدار التدرج للدوال غير القابلة للاشتقاق باستخدام التدرجات الفرعية لتوجيه التحسين.
المتوسط المزدوج
تقنية تحسين عبر الإنترنت تحافظ على متوسط التدرجات في الفضاء المزدوج قبل الإسقاط في الفضاء الأولي.
طريقة التدرج القريب
خوارزمية تجمع بين نزول التدرج ومعامل تقاربي للتعامل مع مصطلحات التنظيم غير القابلة للاشتقاق.
تحسين الدفعات المصغرة
نهج وسيط بين نزول التدرج العشوائي (SGD) والمعالجة الكاملة للدفعات، يستخدم مجموعات صغيرة من الملاحظات لتقدير التدرجات.
تحليل معدل التقارب
دراسة نظرية للسرعة التي تتقارب بها خوارزميات التحسين عبر الإنترنت نحو حلها الأمثل.