Mediatavio
YouTube в MP3ЦенаБлогКонфиденциальность

Видеоинженерия

FFmpeg против WebCodecs: Браузерный видеоконвейер

Родные кодеки для поддерживаемых устройств. Это WebAssembly запасной вариант для всего остального.

Автор: Mediatavio Engineering

Что мы сравниваем

В этой статье сравниваются FFmpeg работа в виде однопоточного WebAssembly внутри браузера с нативным API WebCodecs браузера. Это не сравнение с настольными или серверными FFmpeg, которые тоже могут использовать аппаратные энкодеры.

Mediatavio использует этот гибридный конвейер в Видеоконвертер, Видео компрессор, Видео триммер, Видеокроппер и совместимых экспортов из Видео в аудио.

Техническое отличие

ВозможностиFFmpeg WebAssemblyWebCodecs с Mediabunny
Реализация кодекаПрограммные кодеки, скомпилированные в WebAssemblyНативные браузерные кодеки; Аппаратное ускорение, когда это возможно
Обработка контейнеровВстроенные демаксеры и мультиплексерыMediabunny читает и записывает контейнеры; WebCodecs сам по себе этого не делает
СовместимостьЗависит от кодеков, включенных в нашу сборку FFmpegЗависит от браузера, операционной системы, кодека и конфигурации
ПамятьВходные и выходные файлы в файловой системе WebAssemblyВходные очереди с блоками и ограниченные кодеки; Конечный выход всё ещё буферизирован
ЗапускСкачайте, проверьте и инициализуйте движок WebAssemblyЗагрузите медиабиблиотеку и инициализируйте нативные кодеки
РазвертываниеСтандартная поддержка WebAssembly браузера и WorkerHTTPS или localhost, поддержка Worker и необходимая поддержка кодеков

Мобильный браузер, показывающий VideoEncoder, не гарантирует, что он сможет кодировать определённый профиль или разрешение H.264. Мы проверяем фактическое преобразование и возвращаемся, если необходимые треки не удаётся экспортировать.

Измеренные результаты

Измерения фиксируются в одной тестовой среде. Это примеры, а не гарантия скорости для других компьютеров, браузеров или телефонов.

Среда: Windows x64, VS Code интегрировал Chromium 150.0.7871.250 / Electron 43.8.3, 14 логических процессоров. Вход: 12-секундная синтетическая анимация, 640 на 360 пикселей, 30 кадров в секунду, VP8, 1 033 406 байт, без звука. Оба выхода используют WebM, VP8, исходное разрешение, 30 кадров в секунду и целевой битрейт 394 264 бита в секунду.

Экспортировать время настенных часов за секунды. Три подряд очка на каждый бэкэнд.
ИзмерениеWebCodecsFFmpeg WebAssembly
Забег 10.96873.0943
Второй забег0.73803.0453
Забег 30.72483.0565
Медиана0.73803.0565
Размер выхода — байты604,820601,282-608,611
Длительность выпуска12.00 с12.00 с

Медианное отношение скорости в этом тесте составляло 4,14. Нативное тайминг включает создание нового Worker и создание буфера выхода. FFmpeg время включает копирование входных данных в файловую систему, выполнение экспорта и чтение выходного буфера; Тот же инициализованный двигатель был использован повторно. Инициализация, измеряемая отдельно, занимала 1,0468 секунды с локальной копии движка объемом 32 232 419 байт. Загрузка через интернет, запросы на аккаунт и генерация входных данных исключены.

Это небольшой эталонный показатель синтетического видео, а не сравнение качества с камерой. Нативные и WebAssembly кодировщики используют разные реализации управления скоростью; FFmpeg также получает настройки максимальной скорости и размера буфера. Схожие размеры файлов не обеспечивают одинакового визуального качества. Измерения PSNR, SSIM, VMAF, пиковой памяти или батареи не проводились.

Читайте исходные данные бенчмарка. The Воспроизведение сценария генерирует ввод и запускает оба пути три раза. Требуется устройство с нативной поддержкой кодирования VP8.

const {runVideoBenchmark} = await import('/video-tools/benchmark.mjs');
const results = await runVideoBenchmark();
console.log(results);

Интегрированный тестовый браузер отключает некоторые аудиокодеки в зависимости от политики продукта. Эти измерения времени используют видео без аудиодорожки. Совместимость аудио на реальном устройстве и мобильное тепловое поведение требуют отдельного тестирования. Аппаратное ускорение не было независимо подтверждено.

Как работает запасной вариант

Контейнер чтенияВалидация кодековДекодирование и преобразованиеКодирование и мультиплекс

WebCodecs работает в упраздняемом работнике. Мы обрезаем, масштабируем и корректируем частоту кадров перед кодированием, а затем мультиплируем результат в запрошенный контейнер. Совместимое аудио копируется без повторного кодирования, если не требуется точная обрезка. Мы никогда не опускаем аудиодорожку, чтобы сделать нативный экспорт успешным.

Если декодирование, кодирование или мультиплексирование не поддерживается или не работает, исходный экспорт FFmpeg выполняется с теми же пользовательскими настройками. Отмена завершает текущего работника и предотвращает превращение устаревших результатов в загрузки.

Наш родной маршрут сейчас ориентирован на экспорт видео MP4, MOV, MKV и WebM, а также совместимую аудиоэкстракцию WAV, AAC, M4A и Ogg. AVI, WMV, OGV, 3GP, MP3, FLAC и режим оригинального кодирования остаются на FFmpeg пути. Доступность всё равно зависит от исходного кодека и устройства.

Выбор правильного маршрута

Для распространённых видеофайлов попробуйте Видеоконвертер или Видео компрессор. Нативные кодеки избегают загрузки полного движка WebAssembly, когда устройство поддерживает задачу. Использование Видео триммер для точных разрезов и Видеокроппер для изменений в кадрах.

Оригинальное кодирование — это другая оптимизация: копирование пакетов полностью избегает повторного кодирования, но разрезы могут следовать за ближайшими ключевыми кадрами, и контейнер назначения должен поддерживать исходные кодеки. Не стоит сравнивать с полным транскодированием так, будто оба выполняют одну и ту же работу.

Держите страницу на переднем плане во время экспорта, особенно на мобильных устройствах. Блокировка телефона или переключение может приостановить обработку. Более низкое разрешение или короткие клипы могут снизить нагрузку на память на любом варианте.

Ссылки