Glossárioseguranca

Benchmark

Um teste padronizado utilizado para medir e comparar o desempenho de diferentes modelos de inteligência artificial.

Explicação

Um benchmark funciona como um exame ou prova de aferição para a inteligência artificial. Consiste num conjunto de perguntas ou tarefas que são aplicadas a vários modelos para verificar qual deles obtém os melhores resultados.

Estes testes são fundamentais para garantir que as melhorias feitas num modelo são reais e não apenas fruto do acaso, permitindo uma comparação justa entre diferentes tecnologias.

Exemplo

O benchmark IFStruct avalia se um modelo consegue seguir instruções rigorosas de formatação, como criar um ficheiro JSON sem erros.

Fontes de referência

Demonstração interativa

Como pedir uma explicação sobre “Benchmark”

Uma boa conversa começa com um pedido simples. Depois, peça um exemplo e confirme se percebeu.

Você

O que significa “Benchmark”? Explique sem usar palavras técnicas.

Assistente de IA

Um teste padronizado utilizado para medir e comparar o desempenho de diferentes modelos de inteligência artificial. Um benchmark funciona como um exame ou prova de aferição para a inteligência artificial. Consiste num conjunto de perguntas ou tarefas que são aplicadas a vários modelos para verificar qual deles obtém os melhores resultados.

Você

Pode dar-me um exemplo do dia a dia?

Assistente de IA

O benchmark IFStruct avalia se um modelo consegue seguir instruções rigorosas de formatação, como criar um ficheiro JSON sem erros.

Lembre-se: Se o termo aparecer numa decisão importante, confirme o significado e o contexto na fonte indicada nesta página.