Искусственный интеллект
Мультимодальная модель
Мультимодальная модель обрабатывает или создаёт данные нескольких типов, например текст, изображение, аудио и видео. Для этого нужно представить модальности в форме, совместимой для обмена информацией. Наличие нескольких входов не означает, что модель одинаково компетентна в каждом типе.
Пример на практике
Система принимает фотографию и голосовой вопрос, затем выдаёт текстовый ответ.
Когда пригодится
Тестируйте взаимодействие модальностей, а не только каждую по отдельности.
Что важно учитывать
Ошибка одного кодировщика может исказить итоговый ответ.
Словарь tarasovcode — проект Ильи Тарасова и TarasovWeb. Telegram-канал · #tarasovweb · #ИльяТарасов
Вернуться к 400 терминам