Анализ стратегий и методов объединения многомодальной информации
Аннотация
Постановка проблемы: в области искусственного интеллекта при проектировании многомодальных инфокомму- никационных систем и человеко-машинных интерфейсов крайне актуальны вопросы объединения разнородной информации (текстовой, акустической, визуальной и иных типов), поступающей как от пользователей, так и к ним по различным входным и выходным каналам коммуникации. Основная проблема при разработке и использовании многомодальных инфокоммуникационных систем заключается в том, что для них необходимы эффективные и надежные методы и технологии автоматического распознавания сигналов от каждой модальности, а также многомодального объединения информации и принятия решений. Цель: аналитический обзор научных методологических основ построения интеллектуальных инфокоммуникационных систем, опирающихся на многомодальные человеко-машинные интерфейсы. Результаты: представлен широкий спектр современной научно-технической литературы, описывающей результаты мировых научных исследований по данной теме за последнее десятилетие. Комплексный анализ существующих стратегий и математических методов обработки и интеграции многомодальной информации (на основе раннего, позднего и гибридного подходов к объединению), учета взаимной корреляции и синхронизации модальностей показал, что для большинства прикладных задач разработаны адекватные и эффективные способы объединения и разделения модальностей, которые должны грамотно применяться на этапе проектирования интеллектуальных систем.Опубликован
2015-04-01
Как цитировать
Басов, О. О., & Карпов, А. А. (2015). Анализ стратегий и методов объединения многомодальной информации. Информационно-управляющие системы, (2), 7-14. https://doi.org/10.15217/issn1684-8853.2015.2.7
Выпуск
Раздел
Обработка информации и управление