O que é eval?
Teste sistemático que mede a qualidade das respostas de uma IA contra um critério definido de antemão, em vez de confiar no olhômetro.
Também chamado de: evals, avaliação de modelo.
Uma analogia
O consigliere confere o livro-caixa: não basta o soldato jurar que o serviço foi bom, tem que bater com o que está registrado.
Esta verbete ainda não tem exemplo prático revisado, e por isso não está publicado nos buscadores. A definição e a analogia acima vêm do glossário do curso.
Onde isso aparece no curso
- Avaliação de LLMs (ia-moderna)
- Operação Assistente Completo (production)
- O Braço é teu (production)