CodeBasedEvaluatorDefinition interface

Определение оценщика на основе кода с использованием кода Python

Свойства

blob_uri	URI blob для хранилища оценщика
code_text	Встроенный текст кода для оценщика
entry_point	Точка входа Python имя файла для загруженного кода оценщика (например, 'answer_length_evaluator.py')
image_tag	Тег изображения контейнера для выполнения кода оценщика
type	Дискриминатор типов, всегда «код».

data_schema	Схема JSON (проект 2020-12) для входных данных оценщика. Это включает в себя такие параметры, как тип, свойства, обязательные.
init_parameters	Схема JSON (проект 2020-12) для входных параметров оценщика. Это включает в себя такие параметры, как тип, свойства, обязательные.
metrics	Список выходных метрик, полученных данным оценщиком

URI blob для хранилища оценщика

blob_uri?: string

string

Встроенный текст кода для оценщика

code_text?: string

string

Точка входа Python имя файла для загруженного кода оценщика (например, 'answer_length_evaluator.py')

entry_point?: string

string

Тег изображения контейнера для выполнения кода оценщика

image_tag?: string

string

Дискриминатор типов, всегда «код».

type: "code"

"code"

Схема JSON (проект 2020-12) для входных данных оценщика. Это включает в себя такие параметры, как тип, свойства, обязательные.

data_schema?: Record<string, unknown>

Record<string, unknown>

Унаследовано отEvaluatorDefinition.data_schema

Схема JSON (проект 2020-12) для входных параметров оценщика. Это включает в себя такие параметры, как тип, свойства, обязательные.

init_parameters?: Record<string, unknown>

Record<string, unknown>

Список выходных метрик, полученных данным оценщиком

metrics?: Record<string, EvaluatorMetric>

Record<string, EvaluatorMetric>

Наследуется отEvaluatorDefinition.metrics