نماذج توليدية قائمة على المحولات

مقياس الانتباه (Attention Scale)

معامل يتحكم في توزيع الانتباه في نماذج Transformer، ويؤثر على تركيز أو تشتت التركيز السياقي.

← رجوع