AutoInt

آلية الانتباه متعددة الرؤوس

وحدة تسمح للنموذج بالتركيز في وقت واحد على مواقع مختلفة من تسلسل الإدخال، مع تعلم عدة تمثيلات انتباه بالتوازي لالتقاط التبعيات المعقدة.

← رجوع