Программное обеспечение для обработки, синхронизации и аннотации аудио и разноракурсных видеоданных
Аннотация аудио- и видеоданных Аудиовизуальная речи Чтение речи по губам диктора Разноракурсные видеоданные
Программное обеспечение предназначено для обработки аудио и разноракурсных видеоданных, записанных с нескольких мобильных устройств в параллельном режиме (до 3-х устройств) в кабине транспортного средства. Поддерживаются смартфоны и планшеты с системами iOS (12.5.3 и выше) и Android (9 и выше). Поддерживаемые разрешения (в пикселях): 4K (4K 3840×2160), 1080p (1920×1080) пикселей, с частотой кадров: 25, 30, 60. Максимальная частота кадров – 30 (для планшета) и 60 (для смартфонов) кадров в секунду. Поддерживаемая цветность – 24 бита на пиксель. Аудио может кодироваться как в формате со сжатием (AAC), так и без сжатия (PCM WAV) с частотой дискретизации 44,1 кГц и 48 кГц. Программное обеспечение работает на x64-совместимых компьютерах под управлением 64-разрядных версий операционных систем (ОС) Microsoft Windows 8 и выше, а также по управлением Ubuntu 18.04 и выше.
Цифровая обработка изображений, автоматическое распознавание аудиовизуальной речи, многомодальные интерфейсы, машинное обучение, нейронные сети
Дмитрий
Рюмин
Александрович
старший научный сотрудник
Кандидат технических наук
Отсутствует
AAY-5730-2020
57191960214
РОССИЯ
Андрей
Ронжин
Леонидович
директор
РОССИЯ
28.23.29
Программная реализация интеллектуальных систем
28.23.15
Распознавание образов. Обработка изображений
16.31.21
Автоматическая обработка текста. Автоматический перевод. Автоматическое распознавание речи
01.02.EP
COMPUTER SCIENCE, ARTIFICIAL INTELLIGENCE
Александр
Аксёнов
Александрович
Разработка модуля распараллеливания вычислений и модуля кодирования данных
КАЗАХСТАН
Дмитрий
Рюмин
Александрович
Построение архитектуры, разработка модуля записи и синхронизации
РОССИЯ
Денис
Иванько
Викторович
Разработка модуля распознавания и модуля аннотации аудио- и видеоданных
РОССИЯ
Алексей
Карпов
Анатольевич
Разработка архитектуры программного обеспечения
РОССИЯ
СПБ ФИЦ РАН; ФГБУН СПБ ФИЦ РАН
ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ БЮДЖЕТНОЕ УЧРЕЖДЕНИЕ НАУКИ "САНКТ-ПЕТЕРБУРГСКИЙ ФЕДЕРАЛЬНЫЙ ИССЛЕДОВАТЕЛЬСКИЙ ЦЕНТР РОССИЙСКОЙ АКАДЕМИИ НАУК"
1027800514411
Организация
Министерство науки и высшего образования Российской Федерации
Федеральные государственные бюджетные учреждения