Новое мобильное приложение позволяет людям с заболеванием двигательных нейронов изъясняться при помощи глаз. Программа GazeSpeak, разработанная компанией Microsoft, конвертирует движения глазами в буквы, что позволяет полностью парализованным людям формулировать целые слова и предложения.
При заболевании двигательных нейронов больной не может двигаться, поэтому для таких людей глаза — единственный способ коммуникаций.
Разработанное приложение — дешевая и удобная альтернатива дорогим (они стоят тысячи долларов) устройствам по отслеживанию движений глаз. Также традиционные устройства работают очень медленно, они не надежно работают в лучах солнца и требуют постоянной калибровки.
Программа работает следующим образом. На заднюю часть телефона наклеивается стикер с буквами в четырех квадратах. Человек, который изъясняется глазами, смотрит в направлении одной из четырех групп букв. Мобильное приложение определяет, в какой квадрат смотрит человек, а искусственный интеллект идентифицирует, какое слово хочет сказать больной. Чтобы сигнализировать конец слова или фразы, надо моргнуть правым глазом или смотреть в центр стикера в течение 2 секунд.
Таким образом GazeSpeak конвертирует движения глаз в слова в реальном времени, что значительно упрощает коммуникацию с парализованными людьми. Программа поддерживает различные интерфейсы, в том числе и звуковоспроизведение.