Искусственный интеллект
Набор оценочных задач
Набор оценочных задач объединяет несколько тестов, метрик и процедур для исследования определённого набора способностей. Сравнение имеет смысл, только если одинаковы версии данных, настройки запуска и правила подсчёта. Высокое место не описывает поведение на задачах, не включённых в набор.
Пример на практике
Оценка языковой модели объединяет понимание текста, математику и следование форматам.
Когда пригодится
Публикуйте протокол рядом с итоговыми баллами.
Что важно учитывать
Открытые тесты со временем могут попасть в обучающие корпуса.
Словарь tarasovcode — проект Ильи Тарасова и TarasovWeb. Telegram-канал · #tarasovweb · #ИльяТарасов
Вернуться к 400 терминам