Разработчики из Meta представили новый браслет, который позволяет печатать, не прикасаясь к экрану. Вот как работает это устройство с ИИ. Браслет предназначен для улавливания намерений, стоящих за движением мышц, даже если рука пользователя не касается экрана или поверхности.
Представьте, что вы отправляете сообщение или играете в игру, не пошевелив и пальцем. Или, по крайней мере, не двигая им слишком сильно. Разработанный исследователями компании Meta браслет может воплотить это в реальность. Недавно группа опубликовала исследование нового наручного устройства, которое преобразует малейшие сокращения мышц в команды, понятные компьютеру.
«Нейромоторный браслет» предназначен для улавливания намерения, стоящего за движением, даже если рука пользователя не касается экрана или поверхности. Он может обнаруживать и декодировать электрические сигналы, вырабатываемые мышцами предплечья, используя искусственный интеллект (ИИ).
В видеодемонстрации пользователь пишет в воздухе слова «Hello World», а рядом появляется визуализация соответствующего текста.
Мета также показал, как люди могут перемещать курсор по экрану и играть в игры, используя только нажатия пальцев или небольшие движения руки. «Это действительно захватывающий набор открытий», — сказал Томас Рирдон, вице-президент по исследованиям Meta Reality Labs, в предоставленном компанией видеообъяснении.
Большинство интерфейсов «мозг-машина», доступных сегодня, требуют хирургического вмешательства. Между тем, электроды в браслете улавливают сигналы, посылаемые от мозга к мышцам, вместо того, чтобы вживлять датчики непосредственно в мозг, сверля череп. «Мы решили пойти другим путём и записать естественные сигналы мозга. Нам не нужно проникать внутрь организма, чтобы послушать его. Мы можем сделать это, находясь непосредственно в теле», — сказал Рирдон.
Запястье и предплечье оснащены мышцами, которые контролируют движения кисти и пальцев. Эти нервно-мышечные сигналы обрабатываются в режиме реального времени и отправляют команды на компьютеры через Bluetooth. Команда Meta собрала данные тренировок тысяч участников, чтобы создать ИИ, который подходит пользователям с разными стилями движений.
Команда утверждает, что браслет сможет помочь широкому кругу пользователей: от людей с ограниченными возможностями до обычных пользователей. Патрик Кайфош, директор по научным исследованиям в Meta Reality Labs, заявил, что ожидает «гораздо более далекого развития этой технологии».
«Вы видели, что эти кривые масштабирования продолжают расти по мере того, как появляется больше людей, больше участников, больше данных, и все становится все лучше и лучше», — добавил он.
В заявлении Meta говорится, что компания надеется, что исследование предоставит более широкому научному сообществу план «для создания собственных нейромоторных интерфейсов». Недавно компания опубликовала более 100 часов данных о мышечных сигналах от более чем 300 участников.