قاموس الذكاء الاصطناعي
القاموس الكامل للذكاء الاصطناعي
المُرمِّز الذاتي المُحوِّل
بنية المُرمِّز الذاتي التي تستخدم كتل المُحوِّل لترميز وفك ترميز البيانات مع التقاط التبعيات طويلة المدى. يجمع هذا الأسلوب بين قدرة إعادة البناء للمُرمِّزات الذاتية وآلية الانتباه للمُحوِّلات.
المُرمِّز الذاتي المُقنَّع
متغير من المُرمِّز الذاتي حيث يتم إخفاء أجزاء من بيانات الإدخال ويجب على النموذج التنبؤ بها. مستوحى من BERT، يُشجِّع هذا الأسلوب على تعلم تمثيلات سياقية قوية.
المُرمِّز الذاتي للرؤية بالمُحوِّلات
مُرمِّز ذاتي متخصص في بيانات الصور يستخدم بنية المُحوِّل مع أجزاء الصورة كرموز إدخال. قادر على التقاط التبعيات المكانية طويلة المدى في البيانات البصرية.
تمثيل الفضاء الكامن
فضاء مضغوط بأبعاد مخفضة حيث يتم ترميز البيانات بواسطة المُرمِّز الذاتي، لاقطًا للخصائص الجوهرية. تُنتج المُرمِّزات الذاتية المُحوِّلية تمثيلات غنية ودلالية في هذا الفضاء.
مهمة ما قبل التدريب
هدف تعلم محدد يُستخدم لتدريب المُرمِّزات الذاتية المُحوِّلية مسبقًا على كميات كبيرة من البيانات غير الموسومة. يعتمد عادةً على إعادة بناء الرموز المُقنَّعة أو التنبؤ بها.