Øvelse - Evaluer og sammenlign AI-agentversioner

  • 30 minutter

I denne øvelse evaluerer du to prompt-versioner af Trail Guide Agent og skaber et versionssammenligningsbeslutningsdokument, der begrunder, hvilken version der skal promoveres til produktion baseret på kvalitetsscorer og omkostningsanalyse.

Gennem hele denne øvelse gør du:

  • Designevalueringseksperimenter ved brug af Git-grene til at administrere og sammenligne prompt-versioner
  • Manuelt evaluere AI-agenters svar i forhold til strukturerede kvalitetskriterier (Intention Resolution, Relevans, Jordforbindelse)
  • Sammenlign agentversioner på tværs af testscenarier for at identificere kvalitetsforskelle og omkostningsafvejninger

Bemærkning

For at gennemføre dette laboratorium skal du have et Azure abonnement som du har administrativ adgang til.

Start øvelsen, og følg instruktionerne.

knap for at starte øvelsen.