Évaluer et optimiser les agents IA par le biais d’expériences structurées
Découvrez comment optimiser les agents IA par le biais d’une évaluation structurée qui transforme les estimations en décisions d’ingénierie basées sur des preuves. Vous allez découvrir comment concevoir des expériences d’évaluation avec des métriques claires pour la qualité, le coût et les performances ; organiser des expériences à l’aide de flux de travail basés sur Git ; créer des rubriques d’évaluation pour un scoring cohérent ; et comparer les résultats pour prendre des décisions d’optimisation éclairées.
Objectifs d’apprentissage
Dans ce module, vous allez :
- Concevoir des expériences d’évaluation avec des métriques claires pour la qualité, le coût et les performances
- Appliquer des flux de travail Git pour organiser et comparer systématiquement les variantes d’agent
- Créer des rubriques d’évaluation qui garantissent un scoring cohérent entre les évaluateurs humains
- Comparer les résultats de l’expérience pour prendre des décisions d’optimisation basées sur des preuves
Prérequis
Voici les prérequis pour commencer ce module :
- Compréhension de base des agents IA et des modèles de langage volumineux
- Connaissance des flux de travail de contrôle de version Git
- Expérience avec Microsoft Azure AI Foundry ou des plateformes de développement IA similaires
Prise en main d’Azure
Choisissez le compte Azure qui vous convient. Payez à l’utilisation ou essayez Azure gratuitement pendant jusqu’à 30 jours. S’inscrire.