dot product

Ver no idioma original →

Operação usada para calcular o score entre a query de um token e a key de outro.

Mencionado em

• Cálculo do score de atenção | Álgebra linear para engenheiros de IA
• Álgebra linear para engenheiros de IA: as 4 ideias

Relacionados

softmax, Transformer, PyTorch, vector