Программа распознавания отдельных дактилем русского жестового языка на ПК ЭВМ
Распознавание жестов дактильная азбука русский жестовый язык
Разработан программный модуль распознавания отдельных дактилем русского жестового языка на ПК ЭВМ с использованием веб-камеры. Говорящий на РЖЯ в режиме реального времени показывает отдельные дактилемы, а программа проводит распознавание и выдает на монитор ПК ЭВМ их обозначение. Обучение нейронной сети проводилось на заранее подготовленных данных для тридцати трех диктилем русского жестового языка в виде файлов формата png. Общее число файлов составляет четырнадцать тысяч. Для выявления характерных точек ладони говорящего, исходные файлы подвергались обработке библиотекой Mediapipe. Точность распознавания дактилем составила около 90%, а время – не более 0,2 секунды.
Программа может использоваться в системах поддержки коммуникации глухих и слышащих во всех сферах жизнедеятельности лиц с ограниченными возможностями здоровья по слуху.
Михаил
Гриф
Геннадьевич
Профессор
Доктор технических наук
Профессор
U-2410-2019
14043746900
7941-2678
https://ciu.nstu.ru/kaf/persons/37/
0000-0003-3016-3647
РОССИЯ
Анатолий
Батаев
Андреевич
Ректор
РОССИЯ
28.23.15
Распознавание образов. Обработка изображений
28.23.25
Модели и системы обучения
28.23.37
Нейронные сети
28.23.27
Интеллектуальные робототехнические системы
01.02.EP
COMPUTER SCIENCE, ARTIFICIAL INTELLIGENCE
01.02.EW
COMPUTER SCIENCE, SOFTWARE ENGINEERING
01.02.EX
COMPUTER SCIENCE, THEORY & METHODS
Яна
Кондратенко
Кирилловна
РОССИЯ
Михаил
Гриф
Геннадьевич
РОССИЯ
Алексей
Приходько
Леонидович
РОССИЯ
МИНОБРНАУКИ РОССИИ
МИНИСТЕРСТВО НАУКИ И ВЫСШЕГО ОБРАЗОВАНИЯ РОССИЙСКОЙ ФЕДЕРАЦИИ
1187746579690
Петр
Мордовской
Григорьевич
Организация
Министерство науки и высшего образования Российской Федерации
Федеральные государственные казенные учреждения
НГТУ
Федеральное государственное бюджетное образовательное учреждение высшего образования «Новосибирский государственный технический университет»
1025401485010
Организация
Министерство науки и высшего образования Российской Федерации
Федеральные государственные бюджетные учреждения