Glossáriofundamentos

Benchmark

Um teste padronizado usado para medir e comparar o desempenho de um sistema de inteligência artificial em tarefas específicas.

Explicação

Um benchmark é como um exame ou uma prova de aferição. Os investigadores criam um conjunto de perguntas ou desafios que a inteligência artificial deve resolver. Ao comparar as respostas da IA com as respostas esperadas, é possível atribuir uma pontuação que indica quão bem o modelo se comportou.

Estes testes são fundamentais para a indústria, pois permitem perceber se um modelo está a melhorar ou se apresenta falhas em áreas críticas, como a segurança ou a precisão factual. Contudo, um bom resultado num benchmark não significa que a IA seja perfeita em todas as situações da vida real.

Exemplo

Um benchmark de saúde mental pode incluir 500 perguntas sobre sintomas de ansiedade para verificar se a IA sugere ajuda profissional em vez de tentar diagnosticar o utilizador.

Fontes de referência

Demonstração interativa

Como pedir uma explicação sobre “Benchmark”

Uma boa conversa começa com um pedido simples. Depois, peça um exemplo e confirme se percebeu.

Você

O que significa “Benchmark”? Explique sem usar palavras técnicas.

Assistente de IA

Um teste padronizado usado para medir e comparar o desempenho de um sistema de inteligência artificial em tarefas específicas. Um benchmark é como um exame ou uma prova de aferição. Os investigadores criam um conjunto de perguntas ou desafios que a inteligência artificial deve resolver. Ao comparar as respostas da IA com as respostas esperadas, é possível atribuir uma pontuação que indica quão bem o modelo se comportou.

Você

Pode dar-me um exemplo do dia a dia?

Assistente de IA

Um benchmark de saúde mental pode incluir 500 perguntas sobre sintomas de ansiedade para verificar se a IA sugere ajuda profissional em vez de tentar diagnosticar o utilizador.

Lembre-se: Se o termo aparecer numa decisão importante, confirme o significado e o contexto na fonte indicada nesta página.