Evaluarea și optimizarea agenților AI prin experimente structurate
Învață cum să optimizezi agenții AI printr-o evaluare structurată care transformă presupunerile în decizii inginerești bazate pe dovezi. Vei explora cum să proiectezi experimente de evaluare cu metrici clare pentru calitate, cost și performanță; organizează experimente folosind fluxuri de lucru bazate pe Git; creează rubrici de evaluare pentru o notare consistentă; și compară rezultatele pentru a lua decizii informate de optimizare.
Obiective de instruire
În acest modul, aveți:
- Experimente de evaluare a designului cu metrici clare pentru calitate, cost și performanță
- Aplică fluxuri de lucru bazate pe Git pentru a organiza și compara sistematic variantele agenților
- Creați rubrici de evaluare care să asigure o evaluare consecventă între evaluatorii umani
- Comparați rezultatele experimentelor pentru a lua decizii de optimizare bazate pe dovezi
Cerințe preliminare
Înainte de a porni acest modul, ar trebui să aveți:
- Înțelegerea de bază a agenților AI și a modelelor lingvistice mari
- Familiaritate cu fluxurile de lucru de control al versiunilor Git
- Experiență cu Microsoft Azure AI Foundry sau platforme similare de dezvoltare AI
Familiarizați-vă cu Azure
Alegeți contul Azure potrivit pentru dvs. Plătiți pe măsură ce utilizați sau încercați Azure gratuit timp de până la 30 de zile. Înregistrați-vă.