Искусственный интеллект

Разделение обучающей, проверочной и тестовой выборок

Илья Тарасов — Разделение обучающей, проверочной и тестовой выборок
МатериалРазделение обучающей, проверочной и тестовой выборокtarasovcode

Обучающая выборка используется для подбора параметров, проверочная — для выбора настроек и моделей, тестовая — для итоговой оценки после принятия решений. Разбиение должно учитывать группы, время и структуру задачи. Иначе связанные наблюдения могут сделать независимую оценку недостоверной.

Пример на практике

Отзывы одного автора не распределяют одновременно в обучение и тест, если оценивают перенос на новых авторов.

Когда пригодится

Назначайте назначение каждой части до экспериментов.

Что важно учитывать

Многократный выбор по тесту превращает его в проверочную выборку.

Словарь tarasovcode — проект Ильи Тарасова и TarasovWeb. Telegram-канал · #tarasovweb · #ИльяТарасов

Вернуться к 400 терминам