Инженеры Massachusetts Institute of Technology создали ультразвуковой браслет, который точно отслеживает движения руки и передает их роботу или компьютерной системе.
Об этом пишет издание Interesting Engineering.
Устройство изучает индивидуальные движения пользователя и мгновенно воспроизводит их в цифровой или физической среде.
Устройство носится на запястье и отслеживает движения, анализируя внутренние мышцы, сухожилия и связки. Оно использует алгоритм искусственного интеллекта, который превращает эти изменения в цифровые данные и определяет положение пальцев и ладони с 22 степенями свободы.
По словам профессора механической инженерии Xuanhe Zhao, технология может заменить современные методы отслеживания рук в виртуальной и дополненной реальности. Он также отметил, что она способна обеспечить большие объемы данных для обучения роботов-гуманоидов.
Обычные способы отслеживания движений имеют недостатки: камеры могут перекрываться, перчатки с датчиками неудобны, а сенсоры мышечных сигналов дают много шума. Новый браслет использует миниатюрные ультразвуковые датчики,
которые создают детальные изображения внутреннего строения запястья. ИИ анализирует эти изображения и определяет положение пальцев.
Исследователь Gengxi Lu объяснил, что сухожилия и мышцы работают как нити, которые управляют пальцами, поэтому снимок их состояния позволяет понять положение руки.
Систему протестировали на восьми добровольцах. Браслет точно определял различные позиции рук — от 26 букв американского жестового языка до хватов для ножниц, теннисного мяча или карандаша. Это показало, что ИИ может надежно превращать движения сухожилий в точные цифровые жесты.
Инженеры также продемонстрировали использование устройства в виртуальной среде. Пользователи могли естественными движениями масштабировать и перемещать объекты на экране. В тестах с роботизированной рукой браслет позволял управлять ею на расстоянии — например, играть мелодию на пианино или выполнять движения в настольной баскетбольной игре.
Разработчики считают, что устройство может стать основным инструментом для VR и AR. Собранные данные также могут помочь обучать роботов выполнять сложные задачи, в частности хирургические операции или точное производство.
Читайте также:
- Автоматизация в действии. В Китае в ресторане McDonald’s роботов-гуманоидов привлекли к обслуживанию клиентов
- Все для развития. Agile Robots будет сотрудничать с Google DeepMind для создания роботов с ИИ
- Для тяжелой работы. Renault планирует запустить 350 человекоподобных роботов на своих заводах
