DEVELOPMENT OF EYE-TRACKING BASED SYSTEMS FOR ALTERNATIVE AND AUGMENTATIVE COMMUNICATION


Cite item

Full Text

Abstract

Rehabilitation of people with communication impairments is a socially important issue in Russia. Currently, there are no high-tech alternative and augmentative communication devices on the Russian market. On creation of such devices, a need arises for a model which structures any occurring communication impairment. The article sets out the structure of an alternative model of speech production developed on the basis of Levelt’s model of speech production. Practical application of the developed model is shown in the course of designing a high-tech platform for alternative and augmentative communication.

About the authors

D A Balovnev

Joint Stock Company “Institute of Electronic Control Computers n. a. I. S. Bruk”

Email: balovnev_d@ineum.ru
division manager, JSC «Institute of Electronic Control Computers n. a. I. S. Bruk». 24 Vavilov st., Moscow, Russia, 119334

G G Znayko

Joint Stock Company “Institute of Electronic Control Computers n. a. I. S. Bruk”

Email: znayko_g@ineum.ru
PhD, deputy general manager, JSC «Institute of Electronic Control Computers n. a. I. S. Bruk»

References

  1. Стивен фон Течнер. Введение в альтернативную и дополнительную коммуникацию: жесты и графические символы для людей с двигательными и интеллектуальными нарушениями, а также с расстройствами аутического спектра. М., Теревинф, 2014
  2. Tobii Annual Report 2014. Available at: http://www.tobn. com/siteassets/tobii-group/investor-relations/tobii_annual_ report_2014_en.pdf/?v=1
  3. Carlos G Pinheiro Jr. Alternative communication systems for people with severe motor disabilities: a survey. Bio Medical Engineering On Line. 2011; 10:30.doi: 10.1186/1475-925X-10-31. Available at: http://www.biomedical-engineering-online. com/content/10/1/31. Accessed October 10, 2016
  4. Fager S, Beukelman D, Karantounis R, Jakobs T. Use of safe-laser access technology to increase head movement in persons with severe motor impairment: A series of case reports. AAC: Augmentative and Alternative Communication. 2006 Sep; 22(3):222-229. doi: 10.1080/07434610600650318
  5. Borgestig M, Sandqvist J, Parsons R, Falkmer T, Hemmingsson H. Eye gaze performance for children with severe physical impairments using gaze-based assistive technology - A longitudinal study. Assistive Technology. 2016;28(2):93-102. doi: 10.1080/10400435.2015.1092182
  6. Wolpaw JR, Birbaumer N, McFarland DJ, Pfurtscheller G, Vaughan TM. Brain-computer interfaces for communication and control. Clin Neurophysiol. 2002 Jun;113(6):767-91
  7. Pasqualotto E, Matuz T, Federici S, Ruf CA, Bartl M, Olivetti Belardinelli M, Birbaumer N, Halder S. Usability and Workload of Access Technology for People With Severe Motor Impairment: A Comparison of Brain-Computer Interfacing and Eye Tracking. Neurorehabil Neural Repair. 2015 Nov-Dec; 29(10):950-7. doi: 10.1177/1545968315575611
  8. Kathner I, Ku bler A, Halder S. Comparison of eye tracking, electrooculography and an auditory brain computer interface for binary communication: a case study with a participant in the locked-in state. Journal of Neuro Engineering and Rehabilitation. 2015, 12:76. doi: 10.1186/s12984-015-0071-z. Available at: https://jneuroengrehab.biomedcentral.com/ articles/10.1186/s12984-015-0071-z. Accessed 10.10.2016
  9. Томассело М. Истоки человеческого общения. М.: Языки славянских культур, 2011
  10. Light J, McNaughton D. From Basic to Applied Research to Improve Outcomes for Individuals Who Require Augmentative and Alternative Communication: Potential Contributions of Eye Tracking Research Methods. Augmentative and Alternative Communication. 30:2, 99-105, doi: 10.3109/07434618.2014.906498
  11. Шишкин С. Л.,Козырский Б. Л., Трофимов А.Г., Нуждин Ю. О., Федорова А. А., Свирин Е. П., Величковский Б. М.. Улучшение работы интерфейса «глаз-мозг-компьютер» при использовании частотных компонентов электроэнцефалограммы. Вестник Российского государ-ственного медицинского университета. (2):39-44, 2016

Supplementary files

Supplementary Files
Action
1. JATS XML

Copyright (c) 2016 Balovnev D.A., Znayko G.G.

Creative Commons License
This work is licensed under a Creative Commons Attribution 4.0 International License.

Согласие на обработку персональных данных с помощью сервиса «Яндекс.Метрика»

1. Я (далее – «Пользователь» или «Субъект персональных данных»), осуществляя использование сайта https://journals.rcsi.science/ (далее – «Сайт»), подтверждая свою полную дееспособность даю согласие на обработку персональных данных с использованием средств автоматизации Оператору - федеральному государственному бюджетному учреждению «Российский центр научной информации» (РЦНИ), далее – «Оператор», расположенному по адресу: 119991, г. Москва, Ленинский просп., д.32А, со следующими условиями.

2. Категории обрабатываемых данных: файлы «cookies» (куки-файлы). Файлы «cookie» – это небольшой текстовый файл, который веб-сервер может хранить в браузере Пользователя. Данные файлы веб-сервер загружает на устройство Пользователя при посещении им Сайта. При каждом следующем посещении Пользователем Сайта «cookie» файлы отправляются на Сайт Оператора. Данные файлы позволяют Сайту распознавать устройство Пользователя. Содержимое такого файла может как относиться, так и не относиться к персональным данным, в зависимости от того, содержит ли такой файл персональные данные или содержит обезличенные технические данные.

3. Цель обработки персональных данных: анализ пользовательской активности с помощью сервиса «Яндекс.Метрика».

4. Категории субъектов персональных данных: все Пользователи Сайта, которые дали согласие на обработку файлов «cookie».

5. Способы обработки: сбор, запись, систематизация, накопление, хранение, уточнение (обновление, изменение), извлечение, использование, передача (доступ, предоставление), блокирование, удаление, уничтожение персональных данных.

6. Срок обработки и хранения: до получения от Субъекта персональных данных требования о прекращении обработки/отзыва согласия.

7. Способ отзыва: заявление об отзыве в письменном виде путём его направления на адрес электронной почты Оператора: info@rcsi.science или путем письменного обращения по юридическому адресу: 119991, г. Москва, Ленинский просп., д.32А

8. Субъект персональных данных вправе запретить своему оборудованию прием этих данных или ограничить прием этих данных. При отказе от получения таких данных или при ограничении приема данных некоторые функции Сайта могут работать некорректно. Субъект персональных данных обязуется сам настроить свое оборудование таким способом, чтобы оно обеспечивало адекватный его желаниям режим работы и уровень защиты данных файлов «cookie», Оператор не предоставляет технологических и правовых консультаций на темы подобного характера.

9. Порядок уничтожения персональных данных при достижении цели их обработки или при наступлении иных законных оснований определяется Оператором в соответствии с законодательством Российской Федерации.

10. Я согласен/согласна квалифицировать в качестве своей простой электронной подписи под настоящим Согласием и под Политикой обработки персональных данных выполнение мною следующего действия на сайте: https://journals.rcsi.science/ нажатие мною на интерфейсе с текстом: «Сайт использует сервис «Яндекс.Метрика» (который использует файлы «cookie») на элемент с текстом «Принять и продолжить».