Масштабируемая система автоматического распознавания русской разговорной речи ASR-NSU-AI
DIARIZATION VOICE ACTIVITY DETECTION MACHINE LEARNING SPEECH TO TEXT DEEP LEARNING AUTOMATIC SPEECH RECOGNITION
На текущий момент большинство отраслей и экономик мира проходят «Цифровую трансформацию». В разных областях накоплены множество сырых текстовых, звуковых, цифровых данных которые с одной стороны имеют ценность, но с другой стороны практически невозможно их использовать для современных систем управления: проектами, знаниями, аналитическими инструментами и т.д.  
Русский язык по количеству говорящих или использующих в мире на восьмом – десятом месте ~ 250 млн. чел. Например, английский и китайский по 1,5 млрд. говорящих. Следовательно, есть потребность в решениях, которые позволят более эффективно взаимодействовать человеку с электронными системами на основном естественном языке (русском). 
Основными источниками являются открытые данные, содержащие тексты, речевые сигналы, изображения, которые сначала переводятся в цифровую форму, а затем из них извлекается информация и снова возвращается человеку в семантической форме. Во многом проблема больших данных — это издержки битового представления информации, созданного для одних целей, а впоследствии используемого в других целях. В рамках данного направления предлагается применить подходы машинного обучения для преодоления следующих барьеров:
- необходимость больших размеченных выборок (корпусов) для успешного применения машинного обучения. Данный барьер сдерживает широкое применение алгоритмов обработки текстов естественного языка и распознавания речи. 
- низкая интерпретируемость способа получения прогноза нейросетевой моделью. Барьер не позволяет применять глубокое обучение в областях, где требуется объяснение способа получения решения. 
Мы разрабатываем решения для аналитических систем управления, извлечения и сопоставления мультимодальной информации. Задача по распознаванию речи является научно-исследовательской. Оптимальный уровень решения по распознаванию русской разговорной речи по метрике WER не более 25 в телефонном канале.
Масштабируемая система автоматического распознавания русской разговорной речи ASR-NSU-AI позволяет:
•	Обнаруживать голосовую активность во входном акустическом сигнале.
•	Разделять входящий аудиопоток на однородные сегменты в соответствии с принадлежностью аудиопотока тому или иному говорящему.
•	Преобразовывать речевой сигнал в текстовую информацию.
•	Расставлять знаки препинания, сопоставляя текстовую информацию к говорящему.  
•	Распознавать именованные сущности и строить взаимосвязи между ними.
•	Определять токсичность (положительного/отрицательного мнения).
Баир
Тучинов
Николаевич
Младший научный сотрудник
Отсутствует
Отсутствует
-
57215120683
-
-
РОССИЯ
Михаил
Федорук
Петрович
ректор
РОССИЯ
16.31.21
Автоматическая обработка текста. Автоматический перевод. Автоматическое распознавание речи
01.02.EP
COMPUTER SCIENCE, ARTIFICIAL INTELLIGENCE
05.08.NU
INFORMATION SCIENCE & LIBRARY SCIENCE
Иван
Бондаренко
Юрьевич
10 %
РОССИЯ
Евгений
Павловский
Николаевич
30 %
РОССИЯ
Дарья
Носенко
Игоревна
20 %
РОССИЯ
Баир
Тучинов
Николаевич
20 %
РОССИЯ
Светлана
Кучуганова
Евгеньевна
10 %
РОССИЯ
Марк
Баушенко
Андреевич
10 %
РОССИЯ
Новосибирский государственный университет; НГУ
Федеральное государственное автономное образовательное учреждение высшего образования "Новосибирский национальный исследовательский государственный университет"
1025403658565
Организация
Министерство науки и высшего образования Российской Федерации
Федеральные государственные бюджетные учреждения