Используемый глухонемыми людьми язык жестов имеет один недостаток — его практически не знают слышащие. Чтобы облегчить общение с ними, инженеры придумали «умную» перчатку.
По уверениям авторов разработки из Калифорнийского университета в Сан-Диего, Smart Glоve распознает сделанные рукой жесты и превращает их в текст.
Перчатка имеет 9 гибких датчиков, которые крепятся к костяшкам пальцев, по два на каждом и один на большом пальце. Они подключены к печатной плате на запястье, которая генерирует букву латинского алфавита, опознавая положение пальцев, соответствующее букве жестового языка.
Жесты кодируются девятизначным (по числу датчиков) кодом, каждая цифра которого может принимать значение 1 или 0 в зависимости от того, в каком положении находится соответствующий палец. Итоговое значение соответствует конкретной букве. Так, например, букву A обозначает жест, при котором большой палец оттопырен, а все остальные согнуты — т. е. 011111111.
Чтобы различать одинаковые жесты, перчатка также оснащена акселерометром и датчиком давления. Затем система переводит коды в буквы и отправляет их через Bluetooth для отображения на экране компьютера. В принципе, распознанные и затем превращенные в слова буквы можно и озвучить — для этого потребуется доработать программное обеспечение системы и поставить пару колонок. Главные операции происходят именно на этапе распознавания движений.
Статью авторов можно прочитать в журнале PLоS ONE, а саму перчатку можно увидеть в действии ниже.
https://naked-science.ru/
