Інженери Massachusetts Institute of Technology створили ультразвуковий браслет, який точно відстежує рухи руки й передає їх роботу або комп’ютерній системі.
Про це пише видання Interesting Engineering.
Пристрій вивчає індивідуальні рухи користувача та миттєво відтворює їх у цифровому чи фізичному середовищі.
Пристрій носиться на зап’ясті та відстежує рухи, аналізуючи внутрішні м’язи, сухожилля й зв’язки. Він використовує алгоритм штучного інтелекту, який перетворює ці зміни на цифрові дані та визначає положення пальців і долоні з 22 ступенями свободи.
За словами професора механічної інженерії Xuanhe Zhao, технологія може замінити сучасні методи відстеження рук у віртуальній та доповненій реальності. Він також зазначив, що вона здатна забезпечити великі обсяги даних для навчання роботів-гуманоїдів.
Звичайні способи відстеження рухів мають недоліки: камери можуть перекриватися, рукавички з датчиками незручні, а сенсори м’язових сигналів дають багато шуму. Новий браслет використовує мініатюрні ультразвукові датчики, які створюють детальні зображення внутрішньої будови зап’ястя.
ШІ аналізує ці зображення та визначає положення пальців.
Дослідник Gengxi Lu пояснив, що сухожилля й м’язи працюють як нитки, які керують пальцями, тому знімок їхнього стану дозволяє зрозуміти положення руки.
Систему протестували на восьми добровольцях. Браслет точно визначав різні позиції рук — від 26 літер американської жестової мови до хватів для ножиць, тенісного м’яча чи олівця. Це показало, що ШІ може надійно перетворювати рухи сухожиль у точні цифрові жести.
Інженери також продемонстрували використання пристрою у віртуальному середовищі. Користувачі могли природними рухами масштабувати та переміщувати об'єкти на екрані. У тестах із роботизованою рукою браслет дозволяв керувати нею на відстані — наприклад, грати мелодію на піаніно або виконувати рухи в настільній баскетбольній грі.
Розробники вважають, що пристрій може стати основним інструментом для VR і AR. Зібрані дані також можуть допомогти навчати роботів виконувати складні завдання, зокрема хірургічні операції або точне виробництво.
Читайте також:
