Искусственный интеллект

Визуально-языковая модель

Илья Тарасов — Визуально-языковая модель
МатериалВизуально-языковая модельtarasovcode

Визуально-языковая модель обучает совместное использование изображений и текста для задач описания, поиска, вопросов или сопоставления. Архитектура может иметь отдельные кодировщики или объединять признаки через внимание. Качество зависит от соответствия обучающих пар и целевого применения.

Пример на практике

Пользователь спрашивает, какого цвета автобус на фото, а модель анализирует изображение и формулирует ответ.

Когда пригодится

Оценивайте отдельно распознавание объектов, текста и пространственных отношений.

Что важно учитывать

Модель может описывать отсутствующие детали изображения.

Словарь tarasovcode — проект Ильи Тарасова и TarasovWeb. Telegram-канал · #tarasovweb · #ИльяТарасов

Вернуться к 400 терминам