Новая разработка ученых техасского университета A&M может помочь миллионам глухонемых людей. Исследователи биомедицинского инженерного отдела Texas A&M University создали подключенное устройство в виде повязки на руку, которое способно преобразовывать язык жестов в текст.
В то время, как Google с компаниями-сотрудниками акцентируются на разработке программного обеспечения Babelfish, чтобы перевести речь с одного языка на другой, повязка фокусируется на преобразовании движений запястья и мышечной активности в слова.
Повязка включает датчики для отслеживания жестов руки и запястья, а также ЭМГ сигналы, создаваемые мышцами. В процессе происходит декодирование и послание информации в виде текста с помощью Bluetooth на компьютер или смартфон.
По словам доцента биометрической инженерии Джафари Рузбеха, когда пользователь надевает систему впервые, она работает с определенным уровнем точности, однако со временем, когда пациент все чаще взаимодействует с системой, она начинает распознавать поведение и адаптировать свои собственные модели обучения, чтобы соответствовать пользователю.
В конечном итоге команда планирует минимизировать устройство до размеров SmartWatch, улучшив программное обеспечение для перевода целых предложений, а не только отдельных слов, на что способен прототип устройства на данный момент.
