После трёх месяцев разработки опубликован мультимедиа-пакет FFmpeg 9.1, включающий набор приложений и коллекцию библиотек для операций над различными мультимедиа-форматами (запись, преобразование и декодирование звуковых и видеоформатов). Пакет написан на языке Си и распространяется под лицензиями LGPL и GPL.
Среди изменений в FFmpeg 9.1:
- Добавлен сетевой бэкенд на базе библиотеки libcurl.
- Предложен экспериментальный API для создания bitstream-фильтров для прямой модификации упакованного битового потока без его декодирования. Новый API позволяет объединять фильтры в нелинейные графы, допускающие сложную маршрутизацию, слияние и разделение потоков.
- В утилиту командной строки ffmpeg добавлена возможность работы с двутрековыми представлениями формата кодирования видео LCEVC (Low Complexity Enhancement Video Coding), в которых базовое видео и
метаданные для улучшения качества хранятся в форме отдельных треков. - Добавлена поддержка передачи декодированных видеокадров из аппаратного декодера NVIDIA NVDEC в память GPU с использованием текстурных массивов CUARRAY (CUDA array) вместо буфера CUdeviceptr для улучшения совместимости с графическим API Vulkan.
Поддержка CUARRAY добавлена для кодеков H.264, HEVC, AV1, MPEG-1, MPEG-2, MPEG-4, VC-1, WMV3, VP8 и VP9. - Добавлены упаковщики и распаковщики медиаконтейнеров astc и KTX 1.0, применяемых для хранения текстур. При помощи библиотеки libastcenc реализована поддержка сжатия и распаковки текстур в формате ASTC (Adaptive Scalable Texture Compression).
- Реализована поддержка выбора устройств захвата видео и звука AVFoundation по уникальному идентификатору иди серийному номеру USB-устройства. Для указания идентификаторов добавлены опции «-video_device_id» и «-audio_device_id».
- Добавлен вариант кодировщика (apv_vulkan) для формата APV (Advanced Professional Video), использующий для ускорения возможности графического API Vulkan и вычислительные шейдеры.
- Добавлен кодировщик для формата DSD (dsd_msbf).
- Значительно улучшен кодировщик для звукового формата AAC (Advanced Audio Coding). Добавлена поддержка декодирования формата xHE-AAC (Extended High-Efficiency AAC, стандарт ISO/IEC 23003-3, используется в потоковом вещании Netflix) при помощи библиотеки libfdk-xhe-aac.
- Добавлена поддержка декодирования секционированных (partitioning) видеопотоков H.264, в которых каждый кадр разделяется на несколько частей.
- Добавлены декодировщики для форматов Infinity IMM6, Rhetorex ADPCM, ADPCM IMA Citrix и Panasonic RW2.
- Реализованы декодировщик и распаковщик медиаконтейнеров для формата DVD-Audio LPCM (Linear Pulse Code Modulated).
- Добавлены упаковщики медиаконтейнеров в форматах iTerm2 и JPEG Multi-Picture.
- Добавлены распаковщики медиаконтейнров в форматах MVR и JPEG Multi-Picture.
- Для платформы Windows реализована поддержка протокола «handle:», позволяющего использовать дескрипторы HANDLE из WinAPI и поддерживающего произвольный доступ, а не только линейное чтение как при использовании протокола «pipe:».
- В бэкенд ONNX Runtime добавлена возможность запуска нейросетевых фильтров в Windows, используя реализованную поверх API Direct3D 12 библиотеку DirectML в режиме zero-copy (без копирования видеокадров между видеопамятью ОЗУ).
- Новые фильтры:
- vf_fruc_vulkan — повышает частоту кадров видео через дорисовку промежуточных кадров с помощью аппаратного ускорителя NVIDIA Optical Flow Accelerator, используя Vulkan-расширение VK_NV_optical_flow.
- gainmap — вычисляет карту повышения яркости (HDR Gain Map) на основе SDR- и HDR-версий одного и того же изображения.
- latticepal
— преобразует полноцветное RGB/BGR-изображение в формат c 8-разрядной палитрой PAL8. - vf_vqe_amf — повышает качество видео на системах с GPU AMD, используя механизм подавления шумов VQE (Video Quality Enhancer), доступный в Advanced Media Framework (AMF).
- Добавлены bitstream-фильтры: trim (удаление пакетов вне заданного диапазона), jpegapp (подстановка сегментов JPEG APP0..APP15) и side_data (удаление служебных метаданных).
- Добавлен фильтр слияние слоёв (слой с базовым видео и слой с метаданными для улучшения качества) для видео в формате LCEVC.
Источник: http://www.opennet.ru/opennews/art.shtml?num=66726
