ПРОГРАММА НАСТРОЙКИ МОДЕЛИ СУММАРИЗАЦИИ ТЕСТОВЫХ ДАННЫХ НА ОСНОВЕ ОБУЧЕНИЯ С ПОДКРЕПЛЕНИЕМ
обучение с подкреплением алгоритм резюмирования суммаризация текста Нейронные сети
Данная программа предназначена для циклической настройки весовых коэффициентов модели нейронной сети, созданной на основе топологии трансформер. В качестве метода настройки используется алгоритм обратного распространения ошибки в комбинации с механизмом обучения с подкреплением, который в каждом цикле рассчитывает эффективность нейронной сети и награду за принятые решения. Особенностью алгоритма является динамическое определение награды на базе метрики ROUGE. Она рассчитывается как отношение длины самой большой общей последовательности слов между сгенерированным и эталонным заголовками к количеству слов в эталонном заголовке (для расчёта полноты) или сгенерированном (для расчёта точности) 
В программе задействуется 2 модели нейронных сетей, одна из которых используется как опорная для того, чтобы не допускать слишком сильного изменения весов. Вторая настраивается для решения задачи суммаризации.  Программа реализует следующий процедуры подготовки данных для настройки модели и контроля настройки модели во времени. Расчет награды и оценки эффективности полученной модели выполняются с использованием открытого программного обеспечения. Входными данными для программы являются: веса предобученной модели, csv таблица с данными для обучения в двух колонках: text — исходный текст, summary — краткое резюме текста. Выходными данными являются веса обученной модели, сохраняемые через фиксированное количество их обновлений, файлы с логами, в которых отражается изменение наград после каждого батча и каждой эпохи.
Создание моделей на базе нейронных сетей для анализа текстовых данных с целью составления кратких аннотаций
Вячеслав
Демин
Александрович
Заместитель Главного ученого секретаря Центра
Кандидат физико-математических наук
Отсутствует
35860534
-
-
-
РОССИЯ
Илья
Еремин
Игоревич
Главный ученый секретарь Центра
РОССИЯ
28.29.59
Программированное обучение
28.23.37
Нейронные сети
01.07.RO
MULTIDISCIPLINARY SCIENCES
01.02.EP
COMPUTER SCIENCE, ARTIFICIAL INTELLIGENCE
Александр
Сбоев
Георгиевич
20%
РОССИЯ
Антон
Селиванов
Александрович
20%
РОССИЯ
Роман
Рыбка
Борисович
20%
РОССИЯ
Артем
Грязнов
Викторович
20%
РОССИЯ
Иван
Молошников
Александрович
20%
РОССИЯ
Правительство России
Правительство Российской Федерации
Организация
-
-
НИЦ "Курчатовский институт"
федеральное государственное бюджетное учреждение "Национальный исследовательский центр "Курчатовский институт"
1027739576006
Организация
Правительство Российской Федерации
Федеральные государственные бюджетные учреждения