Нетфликс ВМАФ. Как измерить качество видео с помощью VMAF в Zond

Моделирование человеческого зрения сочетается с машинным обучением в VMAF (Video Multi-Assessment Fusion), показателе качества. Он обеспечивает стабильную оценку независимо от предмета и показывает сильную корреляцию с человеческим восприятием. Netflix широко использовал VMAF в таких областях, как мониторинг качества видео и оптимизация кодирования, благодаря его универсальности.

Существующие показатели, такие как PSNR и SSIM, не отражают человеческое восприятие, и Netflix обнаружил, что «эти показатели не могут обеспечить оценки, которые последовательно прогнозируют рейтинги DMOS от наблюдателей». DMOS — это дифференциальная средняя оценка мнения человека, оценка, полученная в ходе субъективного тестирования.

Новая метрика работает путем объединения нескольких элементарных показателей качества и их объединения с алгоритмом машинного обучения, в частности с регрессором машины опорных векторов (SVM).

Значения VMAF варьируются от качества 0–до 100, где 0 — худшее, а 100 — лучшее. Трудно найти информацию о том, какое значение VMAF следует нацелить, но компания Real Networks написала официальный документ по этой теме и обнаружила, что VMAF 93 является хорошим целевым значением, но все, что в среднем превышает 90, будет выглядеть хорошо.

Если ваш максимально возможный балл VMAF превышает 95, вы тратите данные на качество видео, которые ваша аудитория даже не заметит. Таким образом, VMAF 95 является хорошей целью для создателей высококачественного материала; такие веб-сайты, как YouTube и Facebook, создают пользовательский контент и аналогичный контент с VMAF от 84 до 92.

Zond 265 предоставляет показатели качества для каждого кадра, а также выводит среднее значение для всех обработанных кадров. Это позволяет получить средние значения метрики следующими способами:

• Для отдельного кадра, отображаемого в окне предварительного просмотра.
• Для определенного диапазона кадров: перейдите к определенному кадру и проиграйте необходимый отрезок.
• Для всего файла: нажмите кнопку, чтобы проанализировать все кадры.

Для метрик MSSIM и PSNR среднее значение отображается автоматически. Чтобы получить значение метрики VMAF для кадра, просто нажмите кнопку «Рассчитать» . Если вы хотите оценить качество видеосегмента с помощью метрики VMAF, рассчитайте значение VMAF для каждого кадра в этом сегменте.

Альтернативно вы можете создать отчет, содержащий показатели качества для сегмента, указав начальный номер кадра и количество кадров.

Zond 265, мощная программа видеоанализа и оптимизации, обеспечивает гибкий подход к формату и размеру входящих видеофайлов. К счастью, Zond 265 не накладывает никаких ограничений на размер входных файлов, позволяя анализировать видеофайлы различного размера: от небольших клипов до больших файлов.

Что касается поддерживаемых форматов, Zond 265 имеет широкий спектр совместимости, позволяя работать с множеством видеоформатов: элементарные видеопотоки H.265/HEVC, EVC, H.264/AVC и AV1 (AO Media Video), Транспортный поток MPEG-2 для видео HEVC/H.265 и AVC/H.264, MP4 (MPEG-4 Part 12) с видеопотоками HEVC/H.265, AVC/H.264 и AV1.

• Запустите Zond 265 и откройте файл.
• Перейдите на вкладку «Качество».
• Нажмите «Откройте эталонный файл» и выберите файл с данными YUV.
• Чтобы рассчитать значение VMAF для текущего кадра, нажмите кнопку «Рассчитать».