Основные каналы межличностной коммуникации и их проекция на инфокоммуникационные системы
Ключевые слова:
межличностная коммуникация, канал коммуникации, инфокоммуникационная система, многомодальный интерфейс, полимодальная системаАннотация
Многомодальность традиционной межличностной коммуникации указывает на целесообразность использования полимодального диалога в процессе коммуникативного взаимодействия абонентов инфокоммуникационных систем. Возможность создания полимодальных систем коммуникации обусловлена развитием когнитивной науки и существующими наработками в области проектирования многомодальных интерфейсов. Применение имеющихся и ожидаемых решений задач обработки сигналов различных модальностей при синтезе полимодальных систем обеспечит все стороны общения, а их дальнейшая интеллектуализация позволит приблизить инфокоммуникационное взаимодействие абонентов к традиционному межличностному общению.Литература
Басов О.О. Предпосылки создания полимодальных инфокомуникационных систем // Сборник материалов Международной научно-практической конференции «Неделя науки СПбГПУ». Санкт-Петербургский государственный политехнический университет, 3-8 декабря 2012 г. // Секция «Решение сложных задач в области современных информационных и компьютерных технологий». С. 5–6
Бороздина Г.В. Бороздина Г.В. Психология делового общения. М.: «Деловая книга», 1998. 247 с.
Бутовская M.Л. Язык тела: природа и культура (эволюционные и кросс-культурные основы невербальной коммуникации человека). М.: Научный мир, 2004. 440 с.
Величковский Б.М. Когнитивная наука: основы психологии познания: в 2 т. М.: Смысл. Издательский центр «Ака¬демия», 2006. 432 с.
Гонсалес Р., Вудс Р. Цифровая обработка изображений. М.: Техносфера, 2006. 1072 с.
Кипяткова И.С., Карпов А.А. Аналитический обзор систем распознавания русской речи с большим словарем // Тр. СПИИРАН. СПб.: Наука, 2010. Вып. 1(12). С. 7–20
Кpивцов О.А., Коpиков А.М. Методы отслеживания головы человека на видеокадpах: классификация и выбоp // Информационные технологии. № 9, 2010. С. 13–19
Кухарев Г.А. Системы распознавания человека по изображению лица. СПб.: Изд-во СПбГЭТУ «ЛЭТИ», 2006. 176 с.
Лунева О.В. Общение // Знание. Понимание. Умение. №4, 2005. С. 157–159
Островский М.А., Шевелев И.А. Физиология человека. Учебник (В двух томах. Т. II) / под ред. В.М. Покровского, Г.Ф. Коротько. С. 201–259
Пиз А. Язык телодвижений. Новгород: Аи Кью, 1992
Ронжин А.Л., Карпов А.А. Многомодальные интерфейсы: основные принципы и когнитивные аспекты // Тр. СПИИРАН. СПб.: Наука, 2006. Вып. 3, т. 1. С. 300–319
Сергиенко А.Б. Цифровая обработка сигналов. СПб: Питер, 2002. 608 с.
Фомин Я.А., Тарловский Г.Р. Статистическая теория распознавания образов. М.: Радио и связь, 1986. 264 с.
Хандверкер Х. Физиология человека: в 3-х томах. Т.1. Пер. с англ. / под ред. Р. Шмидта и Г. Тевса (перевод под ред. акад. П.Г. Костюка). М.: Мир, 1996. С. 178–196
Шелухин О.И., Лукьянцев Н.Ф. Цифровая обработка и передача речи / под ред. О.И. Шелухина. М.: Радио и связь, 2000. 456 с.
Ackerl К., Atzmuller M., Grammer К. The Scent of Fear // Neuroendocrinology Letters. Vol. 23, 2002. P. 79–84
Aggarwal J.K., Cai Q. Human motion analysis: а review // Comput. Vis. Image Understanding. Vol. 73, 1999. P. 428–440
Chan T. HMM-based audio-visual speech recognition integrating geometric and appearance-based visual features // IEEE 2nd Workshop on Multimedia Signal Processing. – Oct. 3–5, 2001. P. 9–14
Ekman P., Friesen W.V. The repertoire of non-verbal behavior: categories, origins, usage and coding // Semiotica. №1, 1969. P. 49–98
Ekman P., Friesen W.V. Unmasking the Face. NJ.: Prentice-Hall, INC., Englewood Cliffs, 1975
Emmers T.M., Dindia K. The effect of relational stage and intimacy on touch: an extension of Guerrero and Andersen // Personal Relationships. №2, 1995. P. 225–236
Fasel B., et al. Automatic Facial Expression Analysis: а survey // Pattern Recognition. №36, 2003. P. 259–275
Juan A., et al. Integrated Handwriting Recognition and Interpretation via Finite-State Models // -Technical Report ITI-ITE-01/1. Institut Tecnologic d'Informatica. Valencia (Spain), July 2001
Maglio P.P., et al. Gaze and Speech in Attentive User Interfaces // Proc. of the Third International Conference on Multimodal Interfaces. Beijing, China, 2000
Mankoff J., Abowd G.D. Error Correction Techniques for Handwriting, Speech, and other ambiguous or error prone systems // GVU TechReport GIT-GVU-99-18. June, 1999
Matthews I., et al. Lipreading Using Shape, Shading and Scale. School of Information Systems, University of East Anglia, Norwich, 1999
Mitra S., Acharya T. Gesture Recognition: а survey // IEEE Transactions on Systems, Man, and Cybernetics – Part C: Applications and reviews. Vol. 37, No. 3, May 2007
Oviatt S.L. Multimodal Interactive Maps: Designing for Human Performance // Human Computer Interaction. Special Issue on Multimodal Interfaces. Vol. 12, 1997. P. 93–129
Pinz A. Interpretation and fusion recognition versus reconstruction. Vision Milestones, OGAI lecture series, 1995. P. 9-21
Rares A., Reinders M.J.T., Hendriks E.A. Image Interpretation Systems // Technical Report (MCCWS 2.1.1.3.C), MCCWS project, Information and Communication Theory Group. TU Delft, 1999. 32 p.
Rabiner L.R. A tutorial on hidden Markov models and selected applications in speech recognition // Proc. IEEE. Vol. 77, no. 2, Feb. 1989. P. 257–285
Rabiner L.R., Juang B.H. Fundamentals of speech recognition. New Jersey: Prentice Hall PTR Englewood Cliffs, 1993. 507 p.
Sascha F. Audiovisual speech: analysis, synthesis, perception and recognition // 16th International Congress of Phonetic Science. Saarbrucken, August 2007. P. 275–278
Shotton J., et al. Real-Time Human Pose Recognition in Parts from Single Depth Images // Microsoft Research Cambridge & Xbox Incubation, 2009
Бороздина Г.В. Бороздина Г.В. Психология делового общения. М.: «Деловая книга», 1998. 247 с.
Бутовская M.Л. Язык тела: природа и культура (эволюционные и кросс-культурные основы невербальной коммуникации человека). М.: Научный мир, 2004. 440 с.
Величковский Б.М. Когнитивная наука: основы психологии познания: в 2 т. М.: Смысл. Издательский центр «Ака¬демия», 2006. 432 с.
Гонсалес Р., Вудс Р. Цифровая обработка изображений. М.: Техносфера, 2006. 1072 с.
Кипяткова И.С., Карпов А.А. Аналитический обзор систем распознавания русской речи с большим словарем // Тр. СПИИРАН. СПб.: Наука, 2010. Вып. 1(12). С. 7–20
Кpивцов О.А., Коpиков А.М. Методы отслеживания головы человека на видеокадpах: классификация и выбоp // Информационные технологии. № 9, 2010. С. 13–19
Кухарев Г.А. Системы распознавания человека по изображению лица. СПб.: Изд-во СПбГЭТУ «ЛЭТИ», 2006. 176 с.
Лунева О.В. Общение // Знание. Понимание. Умение. №4, 2005. С. 157–159
Островский М.А., Шевелев И.А. Физиология человека. Учебник (В двух томах. Т. II) / под ред. В.М. Покровского, Г.Ф. Коротько. С. 201–259
Пиз А. Язык телодвижений. Новгород: Аи Кью, 1992
Ронжин А.Л., Карпов А.А. Многомодальные интерфейсы: основные принципы и когнитивные аспекты // Тр. СПИИРАН. СПб.: Наука, 2006. Вып. 3, т. 1. С. 300–319
Сергиенко А.Б. Цифровая обработка сигналов. СПб: Питер, 2002. 608 с.
Фомин Я.А., Тарловский Г.Р. Статистическая теория распознавания образов. М.: Радио и связь, 1986. 264 с.
Хандверкер Х. Физиология человека: в 3-х томах. Т.1. Пер. с англ. / под ред. Р. Шмидта и Г. Тевса (перевод под ред. акад. П.Г. Костюка). М.: Мир, 1996. С. 178–196
Шелухин О.И., Лукьянцев Н.Ф. Цифровая обработка и передача речи / под ред. О.И. Шелухина. М.: Радио и связь, 2000. 456 с.
Ackerl К., Atzmuller M., Grammer К. The Scent of Fear // Neuroendocrinology Letters. Vol. 23, 2002. P. 79–84
Aggarwal J.K., Cai Q. Human motion analysis: а review // Comput. Vis. Image Understanding. Vol. 73, 1999. P. 428–440
Chan T. HMM-based audio-visual speech recognition integrating geometric and appearance-based visual features // IEEE 2nd Workshop on Multimedia Signal Processing. – Oct. 3–5, 2001. P. 9–14
Ekman P., Friesen W.V. The repertoire of non-verbal behavior: categories, origins, usage and coding // Semiotica. №1, 1969. P. 49–98
Ekman P., Friesen W.V. Unmasking the Face. NJ.: Prentice-Hall, INC., Englewood Cliffs, 1975
Emmers T.M., Dindia K. The effect of relational stage and intimacy on touch: an extension of Guerrero and Andersen // Personal Relationships. №2, 1995. P. 225–236
Fasel B., et al. Automatic Facial Expression Analysis: а survey // Pattern Recognition. №36, 2003. P. 259–275
Juan A., et al. Integrated Handwriting Recognition and Interpretation via Finite-State Models // -Technical Report ITI-ITE-01/1. Institut Tecnologic d'Informatica. Valencia (Spain), July 2001
Maglio P.P., et al. Gaze and Speech in Attentive User Interfaces // Proc. of the Third International Conference on Multimodal Interfaces. Beijing, China, 2000
Mankoff J., Abowd G.D. Error Correction Techniques for Handwriting, Speech, and other ambiguous or error prone systems // GVU TechReport GIT-GVU-99-18. June, 1999
Matthews I., et al. Lipreading Using Shape, Shading and Scale. School of Information Systems, University of East Anglia, Norwich, 1999
Mitra S., Acharya T. Gesture Recognition: а survey // IEEE Transactions on Systems, Man, and Cybernetics – Part C: Applications and reviews. Vol. 37, No. 3, May 2007
Oviatt S.L. Multimodal Interactive Maps: Designing for Human Performance // Human Computer Interaction. Special Issue on Multimodal Interfaces. Vol. 12, 1997. P. 93–129
Pinz A. Interpretation and fusion recognition versus reconstruction. Vision Milestones, OGAI lecture series, 1995. P. 9-21
Rares A., Reinders M.J.T., Hendriks E.A. Image Interpretation Systems // Technical Report (MCCWS 2.1.1.3.C), MCCWS project, Information and Communication Theory Group. TU Delft, 1999. 32 p.
Rabiner L.R. A tutorial on hidden Markov models and selected applications in speech recognition // Proc. IEEE. Vol. 77, no. 2, Feb. 1989. P. 257–285
Rabiner L.R., Juang B.H. Fundamentals of speech recognition. New Jersey: Prentice Hall PTR Englewood Cliffs, 1993. 507 p.
Sascha F. Audiovisual speech: analysis, synthesis, perception and recognition // 16th International Congress of Phonetic Science. Saarbrucken, August 2007. P. 275–278
Shotton J., et al. Real-Time Human Pose Recognition in Parts from Single Depth Images // Microsoft Research Cambridge & Xbox Incubation, 2009
Basic channels of interpersonal communication and their projection on the infocommunications systems
Abstract
Multimodality of traditional interpersonal communications points to the purposefulness of using the polymodal dialogue in the process of communicative interaction of infocommunications subscribers. The creation of the polymodal communication systems became possible due to the development of cognitive science and current results in the design area of multimodal interfaces interaction. Application of the existing and expected outcome of signal processing tasks of different modalities in the synthesis of polymodal systems will provide all parties to communicate and their further intellectualization will allow us to approach the infocommunicational interaction of subscribers to the traditional interpersonal communication.Опубликован
2013-12-01
Как цитировать
Басов, О. О., & Саитов, И. А. (2013). Основные каналы межличностной коммуникации и их проекция на инфокоммуникационные системы. Труды СПИИРАН, 7(30), 122-140. https://doi.org/10.15622/sp.30.8
Раздел
Статьи
Авторы, которые публикуются в данном журнале, соглашаются со следующими условиями:
Авторы сохраняют за собой авторские права на работу и передают журналу право первой публикации вместе с работой, одновременно лицензируя ее на условиях Creative Commons Attribution License, которая позволяет другим распространять данную работу с обязательным указанием авторства данной работы и ссылкой на оригинальную публикацию в этом журнале.
Авторы сохраняют право заключать отдельные, дополнительные контрактные соглашения на неэксклюзивное распространение версии работы, опубликованной этим журналом (например, разместить ее в университетском хранилище или опубликовать ее в книге), со ссылкой на оригинальную публикацию в этом журнале.
Авторам разрешается размещать их работу в сети Интернет (например, в университетском хранилище или на их персональном веб-сайте) до и во время процесса рассмотрения ее данным журналом, так как это может привести к продуктивному обсуждению, а также к большему количеству ссылок на данную опубликованную работу (Смотри The Effect of Open Access).