Нейросетевой метод поиска конвергированных осей в 3D-видео для анализа и исправления ошибок
Конвергированные оси Стереоскопическое видео Искусственный интеллект Нейросетевая модель
1. Была разработана нейросетевая модель, которая
использовала 2 вида входных данных: диспарантность
между левым и правым кадром стереоскопической
пары изображений и карту доверия к диспарантности.
Архитектура разработанной модели представляла
собой свёрточную нейрнонную сеть типа кодировщикдекодировщик. Модель состояла из 15 слоёв 3-
х видов: свёрточные слои, слои подвыборки и
полносвязные слои. Модель содержала всего
2886754 параметров.2. Было сгенерировано 4500
стереоскопических кадров разрешением 1920
на 1080 пикселей для обучения нейросетевой
модели: 4000 для обучающей выборки, а 500 для
валидационной. Получение кадров происходило
с помощью мода, написанного для компьютерной
игры GTA V. В положение камер вносились
геометрические искажения конвергированных
осей камер.3. Нейросетевая модель обучалась на
обучающей выборке в течение 70 эпох. Начальных
темп обучения был равен 0.0002. Он уменьшался
в 10 раз, если в течение 10 эпох не падала ошибка
на валидационной выборке.5. Было проведено
исследование оптимальных параметров обучения,
при которых окончательная архитектура модели
даёт максимальную точность при минимальном
времени работы. Для этого использовалась
валидационная выборка из 500 кадров. Коэффициент
корреляции Пирсона между предсказанными и
истинными результатами оказался равен 0.956.
6. Было разработано программное обеспечение,
которое осуществляет поиск конвергированных осей.
Использовался язык программирования Python 3 и
библиотека для машинного обучения TensorFlow 2.
Нейросетевой метод поиска конвергированных
осей в 3D видео требует на вход две
стереопоследовательности кадров, левых и правых.
В качестве выхода программа выводит информацию
о том, конвергированы ли оси в сцене. Если да, то на
какую величину.
Кирилл
Малышев
Владимирович
Студент
Отсутствует
Отсутствует
-
-
РОССИЯ
Кирилл
Малышев
Владимирович
Студент
РОССИЯ
20.53.19
Средства обработки и поиска информации
02.02.YE
TELECOMMUNICATIONS
Кирилл
Малышев
Владимирович
Реализация проекта
РОССИЯ
ФОНД СОДЕЙСТВИЯ ИННОВАЦИЯМ
ФЕДЕРАЛЬНОЕ ГОСУДАРСТВЕННОЕ БЮДЖЕТНОЕ УЧРЕЖДЕНИЕ "ФОНД СОДЕЙСТВИЯ РАЗВИТИЮ МАЛЫХ ФОРМ ПРЕДПРИЯТИЙ В НАУЧНО-ТЕХНИЧЕСКОЙ СФЕРЕ"
1027739479734
СЕРГЕЙ
ПОЛЯКОВ
ГЕННАДЬЕВИЧ
Организация
Федеральное государственное бюджетное учреждение "Фонд содействия развитию малых форм предприятий в научно-технической сфере"
Федеральные государственные бюджетные учреждения
Кирилл
Малышев
Владимирович
Физическое лицо
РОССИЯ