Искусственный интеллект

Утечка данных

Илья Тарасов — Утечка данных
МатериалУтечка данныхtarasovcode

Утечка возникает, когда информация, недоступная при реальном применении, попадает в обучение или настройку. Например, повторяющиеся записи оказываются в разных выборках либо нормализацию подгоняют по тестовым данным. Это делает оценку оптимистичнее и приводит к неверному выводу о переносимости.

Пример на практике

Все изображения одного пациента нужно держать в одном разбиении, иначе модель запомнит особенности съёмки.

Когда пригодится

Проверяйте разбиение до масштабирования признаков и настройки модели.

Что важно учитывать

Высокая метрика не исключает скрытую утечку.

Словарь tarasovcode — проект Ильи Тарасова и TarasovWeb. Telegram-канал · #tarasovweb · #ИльяТарасов

Вернуться к 400 терминам