Программный комплекс для аудиовизуального распознавания эмоций и сентимента (Audio-Visual Emotions and Sentiment Recognition - AVESR)
автоматическое распознавание визуальной речи распознавание образов цифровая обработка изображений анализ сентимента анализ эмоций эмоций и сентимента аудиовизуальное распознавание, речевые технологии Анализ аудио- и видеоданных Распознавание эмоциональных речевых аудиовизуальных данных
Программный комплекс AVESR предназначен для бимодального распознавания эмоций (удивление, злость, печаль, страх, отвращение, счастье) и сентимента (отрицательный, нейтральный, положительный) в режиме реального времени с помощью веб-камеры. Полученные результаты выводятся на экран рядом с изображением пользователя, захваченным с веб-камеры. Программное обеспечение работает на x64-совместимых компьютерах под управлением 64-разрядных версий операционных систем (ОС) Microsoft Windows 10 и выше, а также по управлением Ubuntu 22.04 и выше. Комплекс AVESR в режиме реального времени получает аудио с микрофона и изображение с веб-камеры, производит предварительную обработку сигналов, извлечение признаков, вычисление акустических и визуальных признаков, и их объединение. Программный комплекс разработан при финансовой поддержке Российского научного фонда, проект № 22-11-00321.
Анализ аудио- и видеоданных, речевые технологии, аудиовизуальное распознавание, эмоций и сентимента, анализ эмоций, анализ сентимента, таргетированная реклама
Алексей
Карпов
Анатольевич
Главный научный сотрудник
Доктор технических наук
Профессор
A-8905-2012
57195330987
РОССИЯ
Андрей
Ронжин
Леонидович
И.о.директора
РОССИЯ
16.31.21
Автоматическая обработка текста. Автоматический перевод. Автоматическое распознавание речи
28.23.15
Распознавание образов. Обработка изображений
28.23.29
Программная реализация интеллектуальных систем
28.17.19
Математическое моделирование
01.02.EP
COMPUTER SCIENCE, ARTIFICIAL INTELLIGENCE
Максим
Маркитантов
Викторович
РОССИЯ
Елена
Рюмина
Витальевна
РОССИЯ
Алексей
Карпов
Анатольевич
РОССИЯ
РНФ
Российский научный фонд
1137799022261
Организация
Организации, учрежденные юридическими лицами или гражданами, или юридическими лицами и гражданами совместно
Фонды
СПБ ФИЦ РАН; ФГБУН СПБ ФИЦ РАН
ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ БЮДЖЕТНОЕ УЧРЕЖДЕНИЕ НАУКИ "САНКТ-ПЕТЕРБУРГСКИЙ ФЕДЕРАЛЬНЫЙ ИССЛЕДОВАТЕЛЬСКИЙ ЦЕНТР РОССИЙСКОЙ АКАДЕМИИ НАУК"
1027800514411
АНДРЕЙ
РОНЖИН
ЛЕОНИДОВИЧ
Организация
Министерство науки и высшего образования Российской Федерации
Федеральные государственные бюджетные учреждения