Mecanismos de Atenção Esparsa

Atenção Esparsa em Blocos

Abordagem de atenção esparsa organizada em blocos, onde a matriz de atenção é dividida em blocos e apenas alguns blocos são calculados para otimizar o paralelismo de hardware.

← Voltar