Головная страница ИПМ Библиотеки, издания  •  Поиск публикаций  English 
Публикация

Препринт ИПМ № 66, Москва, 2023 г.
Авторы: Соловьев А.В., Анциферова А.В., Ватолин Д.С., Галактионов В.А.
Разработка метода обработки видео, повышающего оценку метрики качества VMAF на основе её дистилляции
Аннотация:
В данной работе рассматривается задача создания метода предобработки видео, повышающего оценку его качества методом Video Multimethod Assessment Fusion (VMAF). В работе описан нейросетевой метод для автоматической предобработки входного видео, работающий в режиме реального времени. Предобработка осуществляется глубокой нейронной сетью с архитектурой на базе U-Net. В ходе обучения сети используется обучаемая аппроксимация VMAF. В работе описаны способы улучшения качества работы итогового метода, а именно использование SSIM в функции потерь и фильтрация обучающей выборки. Итоговая версия метода повышает VMAF исходного видео в среднем на 18% после предобработки. Разработанный метод позволяет оценить надежность метода оценки качества видео VMAF и демонстрирует уязвимости метода, которые могут использоваться разработчиками алгоритмов обработки видео для повышения рейтингов их методов в ходе автоматического сравнения результатов работы по оценке качества VMAF.
Ключевые слова:
оценка качества видео, анализ устойчивости, дистилляция нейронной сети, состязательные атаки
Язык публикации: русский,  страниц: 11
Направление исследований:
Программирование, параллельные вычисления, мультимедиа
Полный текст на русском языке:
Экспорт ссылки на публикацию в формате:   RIS    BibTeX
Статистика просмотров (обновляется раз в сутки):
за последние 30 дней — 9 (+1), всего с 11.12.2023 — 83
Сведения об авторах:
  • Соловьев Алексей Валерьевич,  orcid.org/0000-0002-6671-3893МГУ имени М.В. Ломоносова
  • Анциферова Анастасия Всеволодовна,  orcid.org/0000-0002-1272-5135МГУ имени М.В. Ломоносова
  • Ватолин Дмитрий Сергеевич,  orcid.org/0000-0002-8893-9340МГУ имени М.В. Ломоносова
  • Галактионов Владимир Александрович,  orcid.org/0000-0001-6460-7539ИПМ им. М.В. Келдыша РАН