Учёные разработали смарт-кольцо для чтения языка жестов

Ученые из Корнеллского университета в США разработали инновационное устройство на основе искусственного интеллекта — смарт-кольцо SpellRing. Это кольцо оснащено технологией микро сонара, которая позволяет в реальном времени отслеживать движения пальцев при написании на американском языке жестов (ASL).

SpellRing делает возможным ввод текста на компьютер или смартфон с помощью символов ASL, используемых для написания слов, которые не имеют стандартных жестов, включая имена собственные и технические термины. Благодаря дальнейшим исследованиям и развитию, кольцо сможет отслеживать полные слова и предложения в реальном времени, что кардинально изменит подход к переводу американского языка жестов.

Кольцо разработано доктором информационных наук Линь Сяньчжэ и профессором Энн С. Боулз из лаборатории SciFi Lab, расположенной в школе компьютерных и информационных наук. SpellRing носится на большом пальце и оснащено микрофоном и динамиком, которые отправляют и принимают ультразвуковые волны для отслеживания движения рук и пальцев. Кроме того, миниатюрный гироскоп следит за движением рук.

Устройство заключено в напечатанное на 3D-принтере кольцо размером с монету. Система использует алгоритмы глубокого обучения для обработки сонограмм в реальном времени, достигая точности распознавания букв, сопоставимой с другими системами, которые обычно требуют более сложного оборудования.

В тестировании участвовали 20 пользователей американского языка жестов с различным уровнем опыта, которым было предложено естественно и непрерывно писать более 20 000 слов. Точность SpellRing варьировалась от 82% до 92% в зависимости от сложности слов.

Ранее издание Пепелац Ньюс сообщало, что акции Samsung выросли на фоне слухов.