Выпуск мультимедиа-пакета FFmpeg 9.1

После трёх месяцев разработки опубликован мультимедиа-пакет FFmpeg 9.1, включающий набор приложений и коллекцию библиотек для операций над различными мультимедиа-форматами (запись, преобразование и декодирование звуковых и видеоформатов). Пакет написан на языке Си и распространяется под лицензиями LGPL и GPL.

Среди изменений в FFmpeg 9.1:

  • Добавлен сетевой бэкенд на базе библиотеки libcurl.
  • Предложен экспериментальный API для создания bitstream-фильтров для прямой модификации упакованного битового потока без его декодирования. Новый API позволяет объединять фильтры в нелинейные графы, допускающие сложную маршрутизацию, слияние и разделение потоков.
  • В утилиту командной строки ffmpeg добавлена возможность работы с двутрековыми представлениями формата кодирования видео LCEVC (Low Complexity Enhancement Video Coding), в которых базовое видео и
    метаданные для улучшения качества хранятся в форме отдельных треков.

  • Добавлена поддержка передачи декодированных видеокадров из аппаратного декодера NVIDIA NVDEC в память GPU с использованием текстурных массивов CUARRAY (CUDA array) вместо буфера CUdeviceptr для улучшения совместимости с графическим API Vulkan.
    Поддержка CUARRAY добавлена для кодеков H.264, HEVC, AV1, MPEG-1, MPEG-2, MPEG-4, VC-1, WMV3, VP8 и VP9.

  • Добавлены упаковщики и распаковщики медиаконтейнеров astc и KTX 1.0, применяемых для хранения текстур. При помощи библиотеки libastcenc реализована поддержка сжатия и распаковки текстур в формате ASTC (Adaptive Scalable Texture Compression).
  • Реализована поддержка выбора устройств захвата видео и звука AVFoundation по уникальному идентификатору иди серийному номеру USB-устройства. Для указания идентификаторов добавлены опции «-video_device_id» и «-audio_device_id».
  • Добавлен вариант кодировщика (apv_vulkan) для формата APV (Advanced Professional Video), использующий для ускорения возможности графического API Vulkan и вычислительные шейдеры.
  • Добавлен кодировщик для формата DSD (dsd_msbf).
  • Значительно улучшен кодировщик для звукового формата AAC (Advanced Audio Coding). Добавлена поддержка декодирования формата xHE-AAC (Extended High-Efficiency AAC, стандарт ISO/IEC 23003-3, используется в потоковом вещании Netflix) при помощи библиотеки libfdk-xhe-aac.
  • Добавлена поддержка декодирования секционированных (partitioning) видеопотоков H.264, в которых каждый кадр разделяется на несколько частей.
  • Добавлены декодировщики для форматов Infinity IMM6, Rhetorex ADPCM, ADPCM IMA Citrix и Panasonic RW2.
  • Реализованы декодировщик и распаковщик медиаконтейнеров для формата DVD-Audio LPCM (Linear Pulse Code Modulated).
  • Добавлены упаковщики медиаконтейнеров в форматах iTerm2 и JPEG Multi-Picture.
  • Добавлены распаковщики медиаконтейнров в форматах MVR и JPEG Multi-Picture.
  • Для платформы Windows реализована поддержка протокола «handle:», позволяющего использовать дескрипторы HANDLE из WinAPI и поддерживающего произвольный доступ, а не только линейное чтение как при использовании протокола «pipe:».
  • В бэкенд ONNX Runtime добавлена возможность запуска нейросетевых фильтров в Windows, используя реализованную поверх API Direct3D 12 библиотеку DirectML в режиме zero-copy (без копирования видеокадров между видеопамятью ОЗУ).
  • Новые фильтры:
    • vf_fruc_vulkan — повышает частоту кадров видео через дорисовку промежуточных кадров с помощью аппаратного ускорителя NVIDIA Optical Flow Accelerator, используя Vulkan-расширение VK_NV_optical_flow.
    • gainmap — вычисляет карту повышения яркости (HDR Gain Map) на основе SDR- и HDR-версий одного и того же изображения.
    • latticepal
      — преобразует полноцветное RGB/BGR-изображение в формат c 8-разрядной палитрой PAL8.
    • vf_vqe_amf — повышает качество видео на системах с GPU AMD, используя механизм подавления шумов VQE (Video Quality Enhancer), доступный в Advanced Media Framework (AMF).
    • Добавлены bitstream-фильтры: trim (удаление пакетов вне заданного диапазона), jpegapp (подстановка сегментов JPEG APP0..APP15) и side_data (удаление служебных метаданных).
    • Добавлен фильтр слияние слоёв (слой с базовым видео и слой с метаданными для улучшения качества) для видео в формате LCEVC.

Источник: http://www.opennet.ru/opennews/art.shtml?num=66726