Ассистивная мобильная система аудиовизуального человеко-машинного взаимодействия для обеспечения безопасного вождения (MIDriveSafely – Multimodal Interaction for Drive Safely)
чтение речи по губам диктора распознавание аудиовизуальной речи автоматическое распознавание аудиовизуальной речи
MIDriveSafely: система помощи водителю, основанная на аудиовизуальном взаимодействии. Это мобильное приложение, способное (1) обнаруживать 6 типов опасных ситуаций на основе видеоинформации с фронтальной камеры смартфона, (2) развлекать водителя с помощью игр, основанных на распознавании и синтезе аудиовизуальной речи. (3) управлять некоторыми функциями телефона (навигация/мультимедиа) и, потенциально, автомобиля (изменять условия освещения/климат-контроль) с помощью голосовых команд, что значительно снижает отвлечение водителя и устраняет необходимость ручного управления этими функциями. Предлагаемая система в основном направлена на повышение безопасности дорожного движения и эффективности вождения за счет анализа и распознавания ситуации водителя в режиме реального времени с учетом различных типов входных данных водителя и параметров окружающей среды.
Цифровая обработка изображений, автоматическое распознавание аудиовизуальной речи, машинное обучение, нейронные сети
Дмитрий
Рюмин
Александрович
старший научный сотрудник
Кандидат технических наук
Отсутствует
AAY-5730-2020
57191960214
РОССИЯ
Андрей
Ронжин
Леонидович
директор
РОССИЯ
16.31.21
Автоматическая обработка текста. Автоматический перевод. Автоматическое распознавание речи
28.23.15
Распознавание образов. Обработка изображений
28.23.29
Программная реализация интеллектуальных систем
28.17.19
Математическое моделирование
01.02.EP
COMPUTER SCIENCE, ARTIFICIAL INTELLIGENCE
Алексей
Карпов
Анатольевич
РОССИЯ
Дмитрий
Рюмин
Александрович
РОССИЯ
Денис
Иванько
Викторович
РОССИЯ
Александр
Аксёнов
Александрович
КАЗАХСТАН
Алексей
Кашевник
Михайлович
РОССИЯ
РНФ
Российский научный фонд
1137799022261
Организация
Организации, учрежденные юридическими лицами или гражданами, или юридическими лицами и гражданами совместно
Фонды
СПБ ФИЦ РАН; ФГБУН СПБ ФИЦ РАН
ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ БЮДЖЕТНОЕ УЧРЕЖДЕНИЕ НАУКИ "САНКТ-ПЕТЕРБУРГСКИЙ ФЕДЕРАЛЬНЫЙ ИССЛЕДОВАТЕЛЬСКИЙ ЦЕНТР РОССИЙСКОЙ АКАДЕМИИ НАУК"
1027800514411
АНДРЕЙ
РОНЖИН
ЛЕОНИДОВИЧ
Организация
Министерство науки и высшего образования Российской Федерации
Федеральные государственные бюджетные учреждения