Mediatavio
YouTube vers MP3PrixBlogConfidentialité

Ingénierie vidéo

FFmpeg vs WebCodecs : un pipeline vidéo navigateur

Codecs natifs pour les appareils pris en charge. Un WebAssembly plan B pour tout le reste.

Par Mediatavio Engineering

Ce que nous comparons

Cet article compare FFmpeg fonctionnant en WebAssembly monothread à l’intérieur d’un navigateur avec l’API WebCodecs native du navigateur. Ce n’est pas une comparaison avec FFmpeg de bureau ou serveur, qui peuvent également utiliser des encodeurs matériels.

Mediatavio utilise ce pipeline hybride dans Convertisseur vidéo, Compresseur vidéo, Coupeuse vidéo, Vidéo recadré et les exportations compatibles de Vidéo en audio.

La différence technique

CapacitésFFmpeg WebAssemblyWebCodecs avec Mediabunny
Implémentation du codecCodecs logiciels compilés en WebAssemblyCodecs natifs du navigateur ; Accélération matérielle lorsque disponible
Manutention de conteneursDemuxeurs et multiples intégrésMediabunny lit et écrit des conteneurs ; WebCodecs seul ne le fait pas
CompatibilitéCela dépend des codecs inclus dans notre FFmpeg versionCela dépend du navigateur, du système d’exploitation, du codec et de la configuration
MémoireFichiers d’entrée et de sortie dans le système de fichiers WebAssemblyEntrées en blob et files d’attente de codec bornées ; La sortie finale est toujours mise en mémoire tampon
DémarrageTéléchargez, vérifiez et initialisez le moteur WebAssemblyChargez la bibliothèque média et initialisez les codecs natifs
DéploiementWebAssembly navigateur standard et support WorkerHTTPS ou localhost, Worker et support codec requis

Un navigateur mobile exposant VideoEncoder ne garantit pas qu’il puisse encoder un profil ou une résolution H.264 particulière. Nous validons la conversion réelle et nous nous replions si les pistes requises ne peuvent pas être exportées.

Résultats mesurés

Les mesures sont enregistrées sur un seul environnement de test. Ce sont des exemples, pas une garantie de vitesse pour d’autres ordinateurs, navigateurs ou téléphones.

Environnement : Windows x64, VS Code intégré Chromium 150.0.7871.250 / Electron 43.8.3, 14 processeurs logiques signalés. Entrée : une animation synthétique de 12 secondes, 640 par 360 pixels, 30 fps, VP8, 1 033 406 octets, sans audio. Les deux sorties utilisent WebM, VP8, la résolution source, 30 fps et un débit binaire cible de 394 264 bits par seconde.

Exportez le temps de l’horloge murale, en secondes. Trois points consécutifs par back-end.
MesureWebCodecsFFmpeg WebAssembly
Run 10.96873.0943
Run 20.73803.0453
Run 30.72483.0565
Médiane0.73803.0565
Taille de sortie, octets604,820601,282-608,611
Durée de sortie12,00 s12,00 s

Le rapport de vitesse médian était de 4,14 lors de ce test. Le timing natif inclut la création d’un nouveau Worker et la production du tampon de sortie. FFmpeg timing inclut la copie des entrées dans son système de fichiers, l’exécution de l’exportation et la lecture du tampon de sortie ; le même moteur initialisé a été réutilisé. Son initialisation mesurée séparément prenait 1,0468 seconde à partir d’une copie locale du moteur de 32 232 419 octets. Le téléchargement Internet, les requêtes de compte et la génération d’entrées sont exclus.

Il s’agit d’un petit benchmark vidéo synthétique, pas d’une comparaison de qualité de séquence caméra. Les encodeurs natif et WebAssembly utilisent des implémentations de contrôle de débit différentes ; FFmpeg reçoit également des réglages de débit maximal et de taille de tampon. Des tailles de fichiers similaires ne prouvent pas une qualité visuelle égale. Aucune mesure PSNR, SSIM, VMAF, mémoire de crête ou batterie n’a été prise.

Lisez les données brutes des benchmarks. Le Script de reproduction génère l’entrée et exécute les deux chemins trois fois. Un appareil avec un support natif de codage VP8 est nécessaire.

const {runVideoBenchmark} = await import('/video-tools/benchmark.mjs');
const results = await runVideoBenchmark();
console.log(results);

Le navigateur de test intégré désactive certains codecs audio selon la politique produit. Ces mesures de synchronisation utilisent la vidéo sans piste audio. La compatibilité audio des appareils réels et le comportement thermique mobile nécessitent des tests séparés. L’accélération matérielle n’a pas été vérifiée de manière indépendante.

Comment fonctionne le plan B

Conteneur de lectureValider les codecsDécodage et transformationEncodage et mux

WebCodecs fait venir un ouvrier licenciable. Nous recadrons, ajustons et corrigeons le taux d’images avant d’encoder, et nous mmixons le résultat dans le conteneur demandé. L’audio compatible est copié sans réencodage lorsqu’aucun découpage précis n’est demandé. Nous n’omettons jamais silencieusement une piste audio pour assurer le succès d’une exportation native.

Si le décodage, l’encodage ou le muxing n’est pas pris en charge ou échoue, l’exportation FFmpeg originale est tentée avec les mêmes paramètres utilisateur. Annuler met fin au Worker actuel et empêche les résultats obsolètes de devenir des téléchargements.

Notre route native cible actuellement les exportations vidéo MP4, MOV, MKV et WebM, ainsi que l’extraction audio compatible WAV, AAC, M4A et Ogg. AVI, WMV, OGV, 3GP, MP3, FLAC et le mode encodage original restent sur la FFmpeg route. La disponibilité dépend toujours du codec source et de l’appareil.

Choisir la bonne voie

Pour les fichiers vidéo courants, essayez Convertisseur vidéo ou Compresseur vidéo. Les codecs natifs évitent de télécharger le moteur WebAssembly complet lorsque l’appareil supporte la tâche. Utilisation Coupeuse vidéo pour des coupes précises et Vidéo recadré pour les changements d’encadrement.

L’encodage original est une optimisation différente : la copie des paquets évite complètement le re-encodage, mais les coupures peuvent suivre des images clés proches et le conteneur de destination doit supporter les codecs originaux. Il ne faut pas le comparer à un transcodage complet comme si les deux effectuaient le même travail.

Gardez la page au premier plan lors de l’exportation, surtout sur mobile. Verrouiller un téléphone ou changer de ligne peut suspendre le traitement. Des clips de résolution plus basse ou plus courts peuvent réduire la pression mémoire sur les deux voies.

Références