Выпуск мультимедиа-пакета FFmpeg 9.1
- После трёх месяцев разработки вышел FFmpeg 9.1 с приложениями и библиотеками для записи, преобразования и декодирования мультимедиа.
- Добавлены сетевой бэкенд libcurl и экспериментальный API битовых фильтров, позволяющий объединять их в нелинейные графы.
- Появились поддержка двутрекового LCEVC, декодирование xHE-AAC и новые фильтры для Vulkan и AMD AMF.
Почему это важно: Передача кадров NVDEC через CUARRAY предназначена для улучшения совместимости с графическим API Vulkan.
После трёх месяцев разработки опубликован мультимедиа-пакет FFmpeg 9.1, включающий набор приложений и коллекцию библиотек для операций над различными мультимедиа-форматами (запись, преобразование и декодирование звуковых и видеоформатов). Пакет написан на языке Си и распространяется под лицензиями LGPL и GPL.
Среди изменений в FFmpeg 9.1:
- Добавлен сетевой бэкенд на базе библиотеки libcurl.
Предложен экспериментальный API для создания bitstream-фильтров для прямой модификации упакованного битового потока без его декодирования. Новый API позволяет объединять фильтры в нелинейные графы, допускающие сложную маршрутизацию, слияние и разделение потоков.
В утилиту командной строки ffmpeg добавлена возможность работы с двутрековыми представлениями формата кодирования видео LCEVC (Low Complexity Enhancement Video Coding), в которых базовое видео и метаданные для улучшения качества хранятся в форме отдельных треков.
Добавлена поддержка передачи декодированных видеокадров из аппаратного декодера NVIDIA NVDEC в память GPU с использованием текстурных массивов CUARRAY (CUDA array) вместо буфера CUdeviceptr для улучшения совместимости с графическим API Vulkan. Поддержка CUARRAY добавлена для кодеков H.264, HEVC, AV1, MPEG-1, MPEG-2, MPEG-4, VC-1, WMV3, VP8 и VP9.
Добавлены упаковщики и распаковщики медиаконтейнеров astc и KTX 1.0, применяемых для хранения текстур. При помощи библиотеки libastcenc реализована поддержка сжатия и распаковки текстур в формате ASTC (Adaptive Scalable Texture Compression).
Реализована поддержка выбора устройств захвата видео и звука AVFoundation по уникальному идентификатору иди серийному номеру USB-устройства. Для указания идентификаторов добавлены опции »-video_device_id» и »-audio_device_id».
Добавлен вариант кодировщика (apv_vulkan) для формата APV (Advanced Professional Video), использующий для ускорения возможности графического API Vulkan и вычислительные шейдеры.
Добавлен кодировщик для формата DSD (dsd_msbf).
Значительно улучшен кодировщик для звукового формата AAC (Advanced Audio Coding). Добавлена поддержка декодирования формата xHE-AAC (Extended High-Efficiency AAC, стандарт ISO/IEC 23003–3, используется в потоковом вещании Netflix) при помощи библиотеки libfdk-xhe-aac.
Добавлена поддержка декодирования секционированных (partitioning) видеопотоков H.264, в которых каждый кадр разделяется на несколько частей.
Добавлены декодировщики для форматов Infinity IMM6, Rhetorex ADPCM, ADPCM IMA Citrix и Panasonic RW2.
Реализованы декодировщик и распаковщик медиаконтейнеров для формата DVD-Audio LPCM (Linear Pulse Code Modulated).
- Добавлены упаковщики медиаконтейнеров в форматах iTerm2 и JPEG Multi-Picture.
Добавлены распаковщики медиаконтейнров в форматах MVR и JPEG Multi-Picture.
Для платформы Windows реализована поддержка протокола «handle:», позволяющего использовать дескрипторы HANDLE из WinAPI и поддерживающего произвольный доступ, а не только линейное чтение как при использовании протокола «pipe:».
В бэкенд ONNX Runtime добавлена возможность запуска нейросетевых фильтров в Windows, используя реализованную поверх API Direct3D 12 библиотеку DirectML в режиме zero-copy (без копирования видеокадров между видеопамятью ОЗУ).
- Новые фильтры:
vf_fruc_vulkan — повышает частоту кадров видео через дорисовку промежуточных кадров с помощью аппаратного ускорителя NVIDIA Optical Flow Accelerator, используя Vulkan-расширение VK_NV_optical_flow.
gainmap — вычисляет карту повышения яркости (HDR Gain Map) на основе SDR- и HDR-версий одного и того же изображения.
- latticepal — преобразует полноцветное RGB/BGR-изображение в формат c 8-разрядной палитрой PAL8.
vf_vqe_amf — повышает качество видео на системах с GPU AMD, используя механизм подавления шумов VQE (Video Quality Enhancer), доступный в Advanced Media Framework (AMF).
- Добавлены bitstream-фильтры: trim (удаление пакетов вне заданного диапазона), jpegapp (подстановка сегментов JPEG APP0…APP15) и side_data (удаление служебных метаданных).
Добавлен фильтр слияние слоёв (слой с базовым видео и слой с метаданными для улучшения качества) для видео в формате LCEVC.
Источник: http://www.opennet.ru/opennews/art.shtml? num=66726
© OpenNet
