Avaliar e otimizar agentes de IA por meio de experimentos estruturados
Intermediário
Engenheiro de IA
Desenvolvedor
Arquiteto de solução
Azure
Microsoft Foundry
Saiba como otimizar agentes de IA por meio de uma avaliação estruturada que transforma o guesswork em decisões de engenharia baseadas em evidências. Você explorará como projetar experimentos de avaliação com métricas claras para qualidade, custo e desempenho; organizar experimentos usando fluxos de trabalho baseados em Git; criar rubricos de avaliação para pontuação consistente; e compare os resultados para tomar decisões de otimização informadas.
Objetivos de aprendizagem
Neste módulo, você:
- Projetar experimentos de avaliação com métricas claras para qualidade, custo e desempenho
- Aplicar fluxos de trabalho baseados em Git para organizar e comparar variantes de agente sistematicamente
- Criar rubricos de avaliação que garantem pontuação consistente entre avaliadores humanos
- Comparar os resultados do experimento para tomar decisões de otimização baseadas em evidências
Pré-requisitos
Antes de iniciar este módulo, você deve ter:
- Noções básicas sobre agentes de IA e modelos de linguagem grandes
- Familiaridade com fluxos de trabalho de controle de versão do Git
- Experiência com o Microsoft Fábrica de IA do Azure ou plataformas de desenvolvimento de IA semelhantes
Introdução ao Azure
Escolha a conta do Azure correta para você. Pague conforme o uso ou experimente o Azure grátis por até 30 dias. Inscrição.