Формализация лексикона системы компьютерного синтеза языка жестов
Ключевые слова:
жестовый язык глухих, аудиовизуальный синтез, ассистивные информационные технологииАннотация
В статье дан аналитический обзор особенностей русского жестового языка и калькирующей жестовой речи, в том числе жестовых лексиконов и грамматических конструкций данного языка, а также возможных методов формализованного представления элементов словаря жестов. В ходе междисциплинарных исследований была адаптирована для задачи синтеза русского жестового языка виртуальная трехмерная модель аватара человека и предложена модель универсального многомодального аудиовизуального синтезатора русской звучащей речи и калькирующей жестовой речи по тексту.Литература
Воскресенский А.Л., Гуленко И.Е., Хахалин Г.К. Cловарь RuSLED как инструмент семантических исследований // Материалы Междунар. конф. «Диалог-2009», 2009. С. 64–68.
Димскис Л.С. Изучаем жестовый язык. М.: Академия, 2002. 128 c.
Зайцева Г.Л. Жестовая речь. Дактилология: Учебник для студентов. М.: ВЛАДОС, 2000. 192 с.
Карпов А.А., Ронжин А.Л. Многомодальные интерфейсы в автоматизированных системах управления // Известия высших учебных заведений. Приборостроение. 2005. Т. 48, №7. С. 9–14.
Карпов А.А., Цирульник Л.И., Железны М. Разработка компьютерной системы ―говорящая голова‖ для аудиовизуального синтеза русской речи по тексту // Информационные технологии. 2010. №8, т. 9. С. 13–18.
Лобанов Б.М., Цирульник Л.И., Железны М., Крноул З. и др. Система аудиовизуального синтеза русской речи // Информатика. 2008. № 4. С. 67–78.
Проект «Сурдосервер 2.0» // Электронный ресурс [http://surdoserver.ru].
Проект iCommunicator» // Электронный ресурс [http://www.icommunicator.com].
Система жестовой нотации Hamburg Notation System // Электронный ресурс [http://www.sign-lang.uni-hamburg.de/projects/hamnosys.html].
Система жестовой нотации SignWriting // Электронный ресурс [http://www.signwriting.org/about/].
Трубецкой Н.С. Основы фонологии. М.: Аспект Пресс, 2000. 352 с.
Bybee J.L., Perkins R., Pagliuca W. The Evolution of Grammar: Tense, Aspect, and Modality in the Languages of the World. University of Chicago Press, 1994.
Hellwig B. et al. ELAN — Linguistic Annotator (version 4.0). 2010. 236 p.
Kanis J., Krňoul Z. Interactive HamNoSys Notation Editor for Signed Speech Annotation // Proc. of the 6th Intern. Conf. on Language Resources and Evaluation LREC-2008. Paris: ELRA. 2008. P. 88–93.
Krňoul Z., Kanis J., Železný M., Müller L. Czech Text-to-Sign Speech Synthesizer // Proc. of the Intern. Conf. on Machine Learning for Multimodal Interaction MLMI-2007. LNCS 4892. 2008. P. 180–191.
Prillwitz S., Hanke T., et al. HamNoSys. Version 2.0; Hamburg Notation System for Sign Languages. An introductory guide. Hamburg: Signum, 1989. 46 p.
Stokoe W.C. Sign Language Structure: An Outline of the Visual Communication Systems of the American Deaf // Studies in Linguistics: Occasional papers. 1960. №8. 78 p.
Železný M., Krňoul Z., Cisar P., Matousek J. Design, implementation and evaluation of the Czech realistic audio-visual speech synthesis // Signal Processing. 2006. Vol. 86, N 12. P. 3657–3673.
Димскис Л.С. Изучаем жестовый язык. М.: Академия, 2002. 128 c.
Зайцева Г.Л. Жестовая речь. Дактилология: Учебник для студентов. М.: ВЛАДОС, 2000. 192 с.
Карпов А.А., Ронжин А.Л. Многомодальные интерфейсы в автоматизированных системах управления // Известия высших учебных заведений. Приборостроение. 2005. Т. 48, №7. С. 9–14.
Карпов А.А., Цирульник Л.И., Железны М. Разработка компьютерной системы ―говорящая голова‖ для аудиовизуального синтеза русской речи по тексту // Информационные технологии. 2010. №8, т. 9. С. 13–18.
Лобанов Б.М., Цирульник Л.И., Железны М., Крноул З. и др. Система аудиовизуального синтеза русской речи // Информатика. 2008. № 4. С. 67–78.
Проект «Сурдосервер 2.0» // Электронный ресурс [http://surdoserver.ru].
Проект iCommunicator» // Электронный ресурс [http://www.icommunicator.com].
Система жестовой нотации Hamburg Notation System // Электронный ресурс [http://www.sign-lang.uni-hamburg.de/projects/hamnosys.html].
Система жестовой нотации SignWriting // Электронный ресурс [http://www.signwriting.org/about/].
Трубецкой Н.С. Основы фонологии. М.: Аспект Пресс, 2000. 352 с.
Bybee J.L., Perkins R., Pagliuca W. The Evolution of Grammar: Tense, Aspect, and Modality in the Languages of the World. University of Chicago Press, 1994.
Hellwig B. et al. ELAN — Linguistic Annotator (version 4.0). 2010. 236 p.
Kanis J., Krňoul Z. Interactive HamNoSys Notation Editor for Signed Speech Annotation // Proc. of the 6th Intern. Conf. on Language Resources and Evaluation LREC-2008. Paris: ELRA. 2008. P. 88–93.
Krňoul Z., Kanis J., Železný M., Müller L. Czech Text-to-Sign Speech Synthesizer // Proc. of the Intern. Conf. on Machine Learning for Multimodal Interaction MLMI-2007. LNCS 4892. 2008. P. 180–191.
Prillwitz S., Hanke T., et al. HamNoSys. Version 2.0; Hamburg Notation System for Sign Languages. An introductory guide. Hamburg: Signum, 1989. 46 p.
Stokoe W.C. Sign Language Structure: An Outline of the Visual Communication Systems of the American Deaf // Studies in Linguistics: Occasional papers. 1960. №8. 78 p.
Železný M., Krňoul Z., Cisar P., Matousek J. Design, implementation and evaluation of the Czech realistic audio-visual speech synthesis // Signal Processing. 2006. Vol. 86, N 12. P. 3657–3673.
Опубликован
2011-03-01
Как цитировать
Карпов, А. А., & Кагиров, И. А. (2011). Формализация лексикона системы компьютерного синтеза языка жестов. Труды СПИИРАН, 1(16), 123-140. https://doi.org/10.15622/sp.16.4
Раздел
Статьи
Авторы, которые публикуются в данном журнале, соглашаются со следующими условиями:
Авторы сохраняют за собой авторские права на работу и передают журналу право первой публикации вместе с работой, одновременно лицензируя ее на условиях Creative Commons Attribution License, которая позволяет другим распространять данную работу с обязательным указанием авторства данной работы и ссылкой на оригинальную публикацию в этом журнале.
Авторы сохраняют право заключать отдельные, дополнительные контрактные соглашения на неэксклюзивное распространение версии работы, опубликованной этим журналом (например, разместить ее в университетском хранилище или опубликовать ее в книге), со ссылкой на оригинальную публикацию в этом журнале.
Авторам разрешается размещать их работу в сети Интернет (например, в университетском хранилище или на их персональном веб-сайте) до и во время процесса рассмотрения ее данным журналом, так как это может привести к продуктивному обсуждению, а также к большему количеству ссылок на данную опубликованную работу (Смотри The Effect of Open Access).
