Dimension interface

Satu dimensi — satu dimensi kualitas independen yang dapat diukur dalam cetak biru penilaian evaluator rubrik.

Properti

always_applicable

Jika benar, hakim LLM selalu menilai dimensi ini terlepas dari relevansinya (melewati penilaian penerapan). Dimensi kualitas/kebijakan umum yang dihasilkan layanan telah diatur ke true dan tidak dapat diedit. Pengguna dapat mengatur ini pada dimensi kustom mereka sendiri. Layanan default ke false jika nilai tidak ditentukan oleh pemanggil.

description

Apa yang diukur oleh dimensi ini (misalnya, "Mengidentifikasi maksud reservasi pengguna dengan benar dan mengejar alur kerja yang sesuai").

id

Pengidentifikasi stabil untuk dimensi ini (snake_case, misalnya, correct_resolution). Required. Disediakan oleh pengguna saat membuat evaluator rubrik secara manual atau selama tinjauan manusia dalam loop dari kumpulan yang dihasilkan; Alur pembuatan menghasilkan nilai awal yang dapat diedit pengguna. Dapat diedit saat menyimpan versi baru.

weight

Berat relatif dimensi ini (1-10). Pipa pembangkit menetapkan tepat satu berat dimensi 8-10; semua yang lain menggunakan 1-6. Pengeditan pengguna tidak dibatasi oleh heuristik ini.

Detail Properti

always_applicable

Jika benar, hakim LLM selalu menilai dimensi ini terlepas dari relevansinya (melewati penilaian penerapan). Dimensi kualitas/kebijakan umum yang dihasilkan layanan telah diatur ke true dan tidak dapat diedit. Pengguna dapat mengatur ini pada dimensi kustom mereka sendiri. Layanan default ke false jika nilai tidak ditentukan oleh pemanggil.

always_applicable?: boolean

Nilai Properti

boolean

description

Apa yang diukur oleh dimensi ini (misalnya, "Mengidentifikasi maksud reservasi pengguna dengan benar dan mengejar alur kerja yang sesuai").

description: string

Nilai Properti

string

id

Pengidentifikasi stabil untuk dimensi ini (snake_case, misalnya, correct_resolution). Required. Disediakan oleh pengguna saat membuat evaluator rubrik secara manual atau selama tinjauan manusia dalam loop dari kumpulan yang dihasilkan; Alur pembuatan menghasilkan nilai awal yang dapat diedit pengguna. Dapat diedit saat menyimpan versi baru.

id: string

Nilai Properti

string

weight

Berat relatif dimensi ini (1-10). Pipa pembangkit menetapkan tepat satu berat dimensi 8-10; semua yang lain menggunakan 1-6. Pengeditan pengguna tidak dibatasi oleh heuristik ini.

weight: number

Nilai Properti

number