Перейти к содержанию
ERITKOM
Open SourceНовость

FFmpeg 9.1 добавил работу с текстурами ASTC и расширил обработку звука

В выпуске Gauss появились чтение и запись ASTC и KTX, энкодер APV на Vulkan, декодирование LPCM с DVD-Audio и изменения в кодировании AAC.

Профессиональная видеокамера Blackmagic со штативом и кабелями
Архивная редакционная иллюстрация, фотография камеры Blackmagic от 8 октября 2024 года. Фото: Syced / Wikimedia Commons, CC0 1.0. Размер и формат изменены.

Что вошло в Gauss

20 ноября проект FFmpeg опубликовал версию 9.1 под названием Gauss. Её выпуск включает изменения в обработке изображений, аудио и видео. Помимо привычной системы команд для перекодирования разработчики распространяют библиотеки, которые используют другие приложения. На странице загрузки проект перечисляет, в частности, libavcodec 63.24.100, libavformat 63.16.100 и libavfilter 12.8.100. Там же доступны архив исходников и файлы подписи.

Одна из новых возможностей касается ASTC, формата сжатия текстур. Теперь FFmpeg может читать и записывать отдельные файлы ASTC и контейнеры KTX первой версии. Команда, которая готовит материалы для игр или графических приложений, может добавить такие файлы в существующий конвейер конвертации, если доступна сборка с нужным кодеком.

Контейнер и кодек проверяются отдельно

Чтение контейнера позволяет извлечь хранящийся в нём поток. Кодек нужен, чтобы декодировать сжатое изображение или записать новое. Для кодирования и декодирования ASTC документация FFmpeg указывает внешнюю библиотеку Arm libastcenc, начиная с версии 5.4. При сборке FFmpeg её включают явно. Версия 9.1 на первой строке справки сама по себе поэтому не гарантирует, что готовый пакет конкретного дистрибутива сможет перекодировать текстуру.

До перевода пакетной обработки на Gauss удобно проверить один исходный файл, открытие результата целевым приложением и сохранение нужных характеристик изображения. Если данные предназначены для движка, стоит проверить текстуру в нём, поскольку успешное чтение файла на этапе сборки ещё не говорит о результате импорта.

Разные способы обработки видео на GPU

Журнал изменений также перечисляет кодировщик APV для Vulkan и фильтр интерполяции кадров NVIDIA FRUC для Vulkan. Первый нужен для записи видеопотока в конкретном формате. Второй рассчитывает промежуточные кадры. Эти функции решают разные задачи и требуют проверки возможностей компьютера, на котором запустится обработка. В версии 9.1 также расширена поддержка LCEVC в транспортных потоках.

Для сравнения результата полезно отобрать короткие фрагменты из собственного архива. При интерполяции кадров подойдут сцены с быстрым движением и участки монтажа со сменой плана. Для кодирования APV важно проверить, открывается ли результат на следующем этапе, где его будут просматривать, передавать или обрабатывать. В журнале проекта перечислены функции, а пригодность для конкретного сценария определяется такой проверкой.

Что поменялось в звуковых дорожках

В 9.1 разработчики существенно обновили встроенный кодировщик AAC. Журнал изменений отдельно указывает возможность кодировать xHE-AAC с помощью внешней библиотеки libfdk-xhe-aac. При обновлении скрипта, который создаёт звуковые дорожки, имеет смысл сверить выбранный кодировщик и проверить, что запись воспроизводится в целевых приложениях. Оценить качество на речи, музыке и смешанном материале можно на одних и тех же исходниках с одинаковыми настройками сравнения.

Для архивных носителей в FFmpeg добавилось декодирование LPCM с DVD-Audio и чтение потоков с таким звуком. При переносе записи стоит посмотреть, какие дорожки распознала программа, совпадают ли длительность и число каналов с ожидаемыми и правильно ли воспроизводится результат. Новые возможности затрагивают разные составные части FFmpeg, поэтому признаки поддержки в своей сборке следует сверять по конкретному формату, кодеку или фильтру.

Источники

Принципы журнала и исправления.

ERITKOM / НОВЫЙ ПРОЕКТ

Расскажите о задаче и оставьте контакты. Мы свяжемся с вами, чтобы обсудить проект.

  1. 01 Контакты
  2. 02 Ваша задача