Программное обеспечение для обработки, сбора метаинформации и разметки эмоциональных речевых видеоданных
аннотация эмоциональных речевых видеоданных
Программное обеспечение предназначено для обработки эмоциональных речевых видеоданных. Максимальная частота кадров – 60 кадров в секунду. Поддерживаемая цветность – 24 бита на пиксель. Программное обеспечение работает на x64-совместимых компьютерах под управлением операционных систем (ОС) Microsoft Windows 8 и выше, а также под управлением Ubuntu 18.04 и выше. Программное обеспечение выполняет следующие функции: 1) извлечение видеокадров из видеофайлов сессий записи; 2) извлечение и сохранение метаданных о видео; 3) извлечение области губ и сохранение метаданных о дикторах (пол, возраст) 4) получение временных меток голосовой активности; 5) разбиение и разметка видеоданных на основе полученной информации; 6) формирования обучающей, валидационной и тестовой выборок; 7) кодирование и сохранение аннотированных видеоданных в соответствии с заданным форматом.
Цифровая обработка изображений, автоматическое распознавание визуальной речи, машинное обучение, нейронные сети.
Алексей
Карпов
Анатольевич
главный научный сотрудник
Доктор технических наук
Доцент
A-8905-2012
57195330987
РОССИЯ
Андрей
Ронжин
Леонидович
директор
РОССИЯ
28.23.29
Программная реализация интеллектуальных систем
28.23.15
Распознавание образов. Обработка изображений
16.31.21
Автоматическая обработка текста. Автоматический перевод. Автоматическое распознавание речи
01.02.EP
COMPUTER SCIENCE, ARTIFICIAL INTELLIGENCE
Денис
Иванько
Викторович
Построение архитектуры, разработка модуля разметки эмоциональных речевых видеоданных.
РОССИЯ
Елена
Рюмина
Витальевна
Разработка модуля обработки и модуля сбора метаинформации.
РОССИЯ
СПБ ФИЦ РАН; ФГБУН СПБ ФИЦ РАН
ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ БЮДЖЕТНОЕ УЧРЕЖДЕНИЕ НАУКИ "САНКТ-ПЕТЕРБУРГСКИЙ ФЕДЕРАЛЬНЫЙ ИССЛЕДОВАТЕЛЬСКИЙ ЦЕНТР РОССИЙСКОЙ АКАДЕМИИ НАУК"
1027800514411
АНДРЕЙ
РОНЖИН
ЛЕОНИДОВИЧ
Организация
Министерство науки и высшего образования Российской Федерации
Федеральные государственные бюджетные учреждения
СПБ ФИЦ РАН; ФГБУН СПБ ФИЦ РАН
ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ БЮДЖЕТНОЕ УЧРЕЖДЕНИЕ НАУКИ "САНКТ-ПЕТЕРБУРГСКИЙ ФЕДЕРАЛЬНЫЙ ИССЛЕДОВАТЕЛЬСКИЙ ЦЕНТР РОССИЙСКОЙ АКАДЕМИИ НАУК"
1027800514411
Организация
Министерство науки и высшего образования Российской Федерации
Федеральные государственные бюджетные учреждения