Evaluer og optimer AI-agenter gennem strukturerede eksperimenter
Lær, hvordan du optimerer AI-agenter gennem struktureret evaluering, der omdanner gætterier til evidensbaserede ingeniørbeslutninger. Du vil udforske, hvordan man designer evalueringsforsøg med klare målepunkter for kvalitet, omkostninger og ydeevne; organisere eksperimenter ved hjælp af Git-baserede workflows; oprette evalueringsrubrikker for ensartet bedømmelse; og sammenligne resultater for at træffe informerede optimeringsbeslutninger.
Læringsmål
I dette modul kan du:
- Designevalueringseksperimenter med klare målepunkter for kvalitet, omkostninger og ydeevne
- Anvend Git-baserede workflows til systematisk at organisere og sammenligne agentvarianter
- Lav evalueringsrubrikker, der sikrer ensartet bedømmelse på tværs af menneskelige evaluatorer
- Sammenlign eksperimentresultater for at træffe evidensbaserede optimeringsbeslutninger
Forudsætninger
Før du starter dette modul, skal du have:
- Grundlæggende forståelse af AI-agenter og store sprogmodeller
- Fortrolighed med Git-versionsstyringsworkflows
- Erfaring med Microsoft Azure AI Foundry eller lignende AI-udviklingsplatforme
Kom i gang med Azure
Vælg den Azure-konto, der passer til dig. Betal efter forbrug, eller prøv Azure gratis i op til 30 dage. Tilmeld dig.