O que significa “Atenção”? Explique sem usar palavras técnicas.
GlossárioModelos de linguagem
Atenção
Mecanismo que permite a um modelo ponderar que partes da entrada são mais relevantes para cada cálculo.
Explicação
A atenção é um componente central dos transformers. Produz relações entre tokens com base no contexto em que aparecem.
Não significa atenção consciente nem garante que o modelo retenha corretamente toda a informação.
Exemplo
Ao responder a uma pergunta, o modelo atribui maior peso ao parágrafo relevante de um documento.
Fontes de referência
Como pedir uma explicação sobre “Atenção”
Uma boa conversa começa com um pedido simples. Depois, peça um exemplo e confirme se percebeu.
Lembre-se: Se o termo aparecer numa decisão importante, confirme o significado e o contexto na fonte indicada nesta página.