الانتباه الذاتي
تسوية Softmax
دالة تنشيط تحول درجات الانتباه إلى توزيع احتمالات، مما يضمن أن مجموع أوزان الانتباه يساوي 1 لكل موضع.
← رجوعدالة تنشيط تحول درجات الانتباه إلى توزيع احتمالات، مما يضمن أن مجموع أوزان الانتباه يساوي 1 لكل موضع.
← رجوع