Представлено смарт-кольцо для языка жестов: как оно работает
Специалисты Корнельского университета разработали умное кольцо SpellRing, которое читает язык жестов в реальном времени и превращает его в текст. Устройство надевается на большой палец и улавливает движения рук с помощью встроенных сенсоров.
SpellRing работает на основе звуковых волн и гироскопа. Кольцо оснащено динамиком и микрофонами, которые улавливают и анализируют изменения в звуковых волнах при движении руки. Одновременно гироскоп фиксирует точные углы и положения пальцев. Все эти данные анализирует специальный алгоритм на основе глубокого обучения.
Главное отличие этого устройства от аналогов — его способность точно распознавать американский язык жестов (ASL) непрерывно и без задержек. Кольцо понимает все 26 букв английского алфавита с точностью до 92%. Это позволяет людям с нарушениями слуха быстро и легко общаться с теми, кто не знает язык жестов.
Важный прорыв заключается в доступности технологии. Прототип SpellRing стоит около 30 долларов (2800 рублей), а при массовом производстве цена может снизиться еще больше. Устройство создано с помощью 3D-печати и по размеру напоминает монету в четверть доллара.
Во время испытаний добровольцы смогли «написать» около 20 000 слов из английского языка с помощью жестов. Тесты проводились как среди новичков, только начинающих изучать язык жестов, так и среди опытных пользователей ASL.
SpellRing уже сейчас можно применять для поиска информации в интернете, навигации по карте и набора текста в заметках. По словам разработчиков, ввод текста с помощью жестов может быть значительно быстрее, чем печать на виртуальной клавиатуре смартфона.
Команда ученых не позиционирует свое изобретение как универсальное решение, но видит в нем большой потенциал для развития. В будущем планируется уменьшить размер устройства, объединив все компоненты на одной плате, и добавить изогнутую батарею. Это позволит сделать SpellRing похожим на обычные смарт-кольца наподобие Oura или Samsung.
Еще одно перспективное направление — интеграция с AR-очками. Такая комбинация поможет отслеживать жесты вместе с визуальной интерпретацией, что сделает общение еще более естественным. Исследование будет представлено на конференции Ассоциации вычислительной техники по человеческим факторам в компьютерных системах в Японии в следующем месяце. Пока SpellRing остается прототипом, но его появление уже сейчас открывает новые возможности для людей с нарушениями слуха и речи.
Также в этом месяце было анонсировано умное кольцо с датчиками ЭКГ и давления. Рассказали о нем в статье.
