ИИ-кольцо умеет переводить язык жестов

Научная группа под руководством Корнеллского университета на базе ИИ создала специальное кольцо, которое в реальном времени может переводить с американского языка жестов или амслена (American Sign Language, ASL). Оно получило название SpellRing.

На данный момент с помощью кольца можно печатать текст на компьютере или смартфоне. Для этого устройство использует микросонар для отслеживания дактилологии. Однако пока нельзя написать имена собственные и технические термины.

Кольцо будет представлено на конференции Human Factors in Computing Systems, которую Ассоциация вычислительной техники проведет в японской Иокогаме с 26 апреля по 1 мая 2025 года. На данный момент известно, что оно надевается на большой палец. За счет встроенного микрофона, динамика и мини-гироскопа, которые посылают и принимают неслышимые звуковые волны, оно отслеживает движение рук и пальцев.

SpellRing было протестировано на 20 продвинутых и начинающих пользователях амслена, которые воспроизвели более 20 тыс. слов различной длины. Результат точности варьировался от 82% до 92%.

Исследователи считают, что данная технология должна произвести революцию в переводе с ASL, однако многие другие подобные технологии ранее не были приняты в сообществе глухих и слабослышащих. Причиной стали большие размеры и непрактичность оборудования. Кольцо же в свою очередь достаточно небольшое и со времен сможет отслеживать целые жестовые слова и предложения.

Ранее стало известно, что компания Apple добавит в свои наушники AirPods новую функцию, которая будет переводить речь в режиме реального времени. Отмечается, что перевод будет синхронным.