Codecs in gebräuchlichen Medientypen

Containerformat-MIME-Typen

Der MIME-Typ für ein Containerformat wird durch die Angabe des Medientyps (audio, video, etc.) ausgedrückt, gefolgt von einem Schrägstrich (/) und dem Format, das zur Aufnahme der Medien verwendet wird:

audio/mpeg

Eine Audiodatei, die den MPEG-Dateityp verwendet, wie ein MP3.

video/ogg

Eine Videodatei, die den Ogg-Dateityp verwendet.

video/mp4

Eine Videodatei, die den MPEG-4-Dateityp verwendet.

video/quicktime

Eine Videodatei im QuickTime-Format von Apple. Wie an anderer Stelle erwähnt, wurde dieses Format einst häufig im Web verwendet, ist es aber nicht mehr, da es ein Plugin erforderte.

Jedoch ist jeder dieser MIME-Typen vage. Alle diese Dateitypen unterstützen eine Vielzahl von Codecs, und diese Codecs können eine beliebige Anzahl von Profilen, Stufen und anderen Konfigurationsfaktoren haben. Aus diesem Grund möchten Sie möglicherweise den codecs-Parameter zusammen mit dem Medientyp angeben.

Grundlegende Syntax

Sie können den codecs-Parameter zum Medientyp hinzufügen. Fügen Sie dazu ein Semikolon (;) hinzu, gefolgt von codecs= und dann dem String, der das Format der Dateiinhalte beschreibt. Einige Medientypen erlauben es nur, die Namen der zu verwendenden Codecs anzugeben, während andere es ermöglichen, auch verschiedene Einschränkungen dieser Codecs zu spezifizieren. Sie können mehrere Codecs angeben, indem Sie sie mit Kommas trennen.

audio/ogg; codecs=vorbis

Eine Ogg-Datei mit einer Vorbis-Tonspur.

video/webm; codecs="vp8, vorbis"

Eine WebM-Datei mit VP8-Video und/oder Vorbis-Audio.

video/mp4; codecs="avc1.4d002a"

Eine MPEG-4-Datei mit AVC-Video (H.264), Main Profile, Level 4.2.

Wie bei jedem MIME-Typ-Parameter muss codecs in codecs* geändert werden (beachten Sie das Sternchen *), wenn eine der Eigenschaften des Codecs Sonderzeichen verwendet, die gemäß RFC 2231, Abschnitt 4: MIME Parameter Value and Encoded Word Extensions prozentkodiert werden müssen. Sie können die JavaScript-Funktion encodeURI() verwenden, um die Parameterliste zu kodieren; ebenso können Sie decodeURI() verwenden, um eine zuvor kodierte Parameterliste zu dekodieren.

Codec-Optionen nach Container

Die folgenden Container unterstützen erweiterte Codec-Optionen in ihren codecs-Parametern:

• 3GP
• AV1
• HEVC
• ISO BMFF
• MPEG-4
• QuickTime
• WebM

Mehrere der oben genannten Links führen zum gleichen Abschnitt; das liegt daran, dass diese Medientypen alle auf dem ISO Base Media File Format (ISO BMFF) basieren und daher die gleiche Syntax teilen.

AV1

Die Syntax des codecs-Parameters für AV1 ist in der AV1 Codec ISO Media File Format Binding-Spezifikation, Abschnitt 5: Codecs Parameter String definiert.

av01.P.LLT.DD[.M.CCC.cp.tc.mc.F]

Die Komponenten dieses Codec-Parameter-Strings sind in der nachstehenden Tabelle ausführlicher beschrieben. Jede Komponente hat eine feste Zeichenlänge; wenn der Wert kürzer als diese Länge ist, muss er mit führenden Nullen aufgefüllt werden.

Alle Felder ab M (Monochrom-Flag) sind optional; Sie können das Hinzufügen von Feldern jederzeit stoppen (aber keine Felder willkürlich auslassen). Die Standardwerte sind in der obigen Tabelle enthalten. Einige Beispiel-AV1-Code-Strings:

av01.2.15M.10.0.100.09.16.09.0

AV1 Professional Profil, Level 5.3, Main-Tier, 10 Bit pro Farbkomponente, 4:2:2 Chroma-Subsampling mit ITU-R BT.2100 Farbgrundfarben, Übertragungsmerkmalen und YCbCr-Farbmatrix. Die Studio-Swing-Darstellung ist angegeben.

av01.0.15M.10

AV1 Main-Profil, Level 5.3, Main-Tier, 10 Bit pro Farbkomponente. Die verbleibenden Eigenschaften werden von den Standardwerten übernommen: 4:2:0 Chroma-Subsampling, BT.709 Farbgrundfarben, Übertragungsmerkmale und Matrixkoeffizienten. Studio-Swing-Darstellung.

VP9

ISO Base Media File Format Syntax

Die Syntax des codecs-Parameters für VP9 ist in der VP Codec ISO Media File Format Binding-Spezifikation im Abschnitt Codecs Parameter String definiert.

In diesem Format beginnt der Wert des codecs-Parameters mit einem vierstelligen Code, der den im Container verwendeten Codec identifiziert, gefolgt von einer Reihe von durch Punkte (.) getrennten zweistelligen Werten.

cccc.PP.LL.DD
cccc.PP.LL.DD.CC.cp.tc.mc.FF

Die ersten vier Komponenten sind erforderlich; alles ab CC (Chroma-Subsampling) ist optional, jedoch alles oder nichts. Jede dieser Komponenten wird in der folgenden Tabelle beschrieben. Auf die Tabelle folgen einige Beispiele.

Beispiele

video/webm;codecs="vp09.02.10.10.01.09.16.09.01,opus"

VP9-Video, Profil 2 Level 1.0, mit 10-Bit YUV-Inhalten unter Verwendung von 4:2:0 Chroma-Subsampling, BT.2020-Grundfarben, ST 2084 EOTF (HDR SMPTE), BT.2020-Nicht-Konstanz-Luminanz-Farbmatrix und Vollbereichs-Chroma- und Luma-Kodierung. Das Audio ist im Opus-Format.

ISO Base Media File Format: MP4, QuickTime und 3GP

Alle Medientypen, die auf dem ISO Base Media File Format (ISO BMFF) basieren, teilen die gleiche Syntax für den codecs-Parameter. Diese Medientypen umfassen MPEG-4 (und, in der Tat, das QuickTime-Dateiformat, auf dem MPEG-4 basiert) sowie 3GP. Sowohl Video- als auch Audiotracks können mit dem codecs-Parameter mit den folgenden MIME-Typen beschrieben werden:

Jeder durch den codecs-Parameter beschriebene Codec kann entweder als Containername (3gp, mp4, quicktime, usw.) oder als Containername plus zusätzliche Parameter spezifiziert werden, um den Codec und seine Konfiguration näher zu bestimmen. Jeder Eintrag in der Codec-Liste kann eine Anzahl von Komponenten enthalten, die durch Punkte (.) getrennt werden.

Die Syntax des Wertes von codecs variiert je nach Codec; es beginnt jedoch immer mit dem vierstelligen, Case-sensitiven Sample-Entry-Code des Codecs. Einige Codecs fügen einen Punktseparator (.) hinzu, dem zusätzliche Parameter folgen, wie z.B. eine Object Type Indication (OTI) oder Details zum Codecprofil. Bei den meisten Codecs, die ein OTI verwenden, besteht der Wert aus einer zwei-stelligen hexadezimalen Zahl; jedoch verwendet AVC (H.264) sechs hexadezimale Ziffern, um das Profil zu identifizieren.

So sehen die Syntaxen der unterstützten Codecs aus:

cccc[.pp]* (Generisches ISO BMFF)

Wo cccc die vierstellige ID für den Codec und pp der Ort ist, an dem null oder mehr zweistellig codierte Eigenschaftswerte hingehen.

mp4a.oo[.A] (MPEG-4-Audio)

Wo oo der Object Type Indication-Wert ist, der die Inhalte des Mediums genauer beschreibt und A der einstellige Audio-OTI ist. Die möglichen Werte für das OTI finden Sie auf der MP4-Registrierungsstelle-Website Object Types Seite. Beispielsweise ist AAC-LC-Audio in einer MP4-Datei mp4a.40.2. Für weitere Details siehe MPEG-4-Audio.

mp4v.oo[.V] (MPEG-4-Video)

Hier ist oo wiederum das OTI, das den Inhalt genauer beschreibt, während V der einstellige Video-OTI ist.

avc1[.PPCCLL] (AVC-Video)

PPCCLL sind sechs hexadezimale Ziffern, die die Profilnummer (PP), die Flags (CC) und die Stufe (LL) spezifizieren. Siehe AVC-Profile für die möglichen Werte von PP.

Das Constraint-Set-Flags-Byte besteht aus einstelligen booleanischen Flags, wobei das bedeutendste Bit als Flag 0 (oder constraint_set0_flag, in einigen Ressourcen) bezeichnet wird, und jedes nachfolgende Bit um eins höher nummeriert ist. Derzeit werden nur die Flags 0 bis 2 verwendet; die anderen fünf Bits müssen null sein. Die Bedeutungen der Flags variieren je nach verwendetem Profil.

Die Stufe ist eine Festkommazahl; ein Wert von 14 (dezimal 20) bedeutet Level 2.0, während ein Wert von 3D (dezimal 61) Level 6.1 bedeutet. Im Allgemeinen gilt: je höher die Stufenummer, desto mehr Bandbreite wird der Stream verwenden und desto höhere maximale Videodimensionen werden unterstützt.

avc3[.PPCCLL] (Variable Resolution AVC)

Die avc3-Codec-Parameter haben die gleiche Syntax wie die avc1-Codec-Parameter.

AVC-Profile

Die folgenden sind die AVC-Profile und ihre Profilnummern zur Verwendung im codecs-Parameter sowie der Wert, den Sie für die Constraints-Komponente CC angeben müssen.

MPEG-4-Audio

Wenn der Wert eines Eintrages in der codecs-Liste mit mp4a beginnt, sollte die Syntax des Wertes sein:

mp4a.oo[.A]

Hier ist oo die zwei-stellige hexadezimale Object Type Indication, die die Medienklasse spezifiziert, die für die Medien verwendet wird. Die OTIs werden von der MP4-Registrationsstelle zugewiesen, die eine Liste der möglichen OTI-Werte führt. Ein besonderer Wert ist 40; dieser Wert gibt an, dass die Medien MPEG-4-Audio (ISO/IEC 14496 Teil 3) sind. Um noch genauer zu sein, wird eine dritte Komponente — der Audio Object Type — für OTI 40 hinzugefügt, um den Typ weiter auf einen bestimmten Subtyp von MPEG-4 einzugrenzen.

Der Audio Object Type wird als eine ein- oder zweistellige Dezimal-Zahl spezifiziert (im Gegensatz zu den meisten anderen Werten im codecs-Parameter, die das Hexadezimalformat verwenden). Beispielweise hat MPEG-4's AAC-LC eine Audio-Objekttypnummer von 2, sodass der vollständige codecs-Wert, der AAC-LC repräsentiert, mp4a.40.2 ist.

Demgemäß kann ER AAC LC, dessen Audio Object Type 17 ist, mit dem vollständigen codecs-Wert mp4a.40.17 dargestellt werden. Einstellige Werte können entweder als eine Ziffer gegeben werden (was die beste Wahl ist, da sie breiter kompatibel sein wird) oder mit einer führenden Null aufgefüllt werden, sodass sie zwei Ziffern sind, wie mp4a.40.02.

Die Audio-Objekttypen sind in ISO/IEC 14496-3 Unterteilung 1, Abschnitt 1.5.1 festgelegt. Die folgende Tabelle bietet eine grundlegende Liste der Audio-Objekttypen und in einigen der häufigeren Objekttypen sind unterstützende Profile aufgeführt. Sie sollten jedoch auf die Spezifikation verweisen, wenn Sie mehr über die Funktionsweise eines bestimmten MPEG-4-Audiotyps erfahren möchten.

Opus

Opus-Audio in einem ISO BMFF-Container verwendet Opus als Sample-Eintrag und codecs-Wert. Der Wert ist Case-sensitiv. Obwohl die MP4-Registrierungsbehörde die Object Type Indication 0xAD an Opus vergibt, definiert die Opus-Kapselungsspezifikation keinen MP4AudioSampleEntry, der diesen Wert verwendet, daher wird mp4a.ad nicht verwendet.

audio/mp4;codecs=Opus
video/mp4;codecs=avc1.4D401E,Opus

HEVC: MP4, Quicktime, Matroska

Der High Efficiency Video Coding-Codec, auch bekannt als H.265 und MPEG-H Teil 2, kann in die MP4 (video/mp4), Quicktime (video/quicktime) und Matroska (video/matroska)-Container einbezogen werden.

Die Verwendung von HEVC wird im Allgemeinen mithilfe eines unterstützenden MIME-Typs mit dem angehängten codecs-Parameter beschrieben; Syntaxbeispiele sind wie folgt:

video/mp4;codecs=hvc1.1.6.L186.B0,mp4a.40.2
video/mp4;codecs=hvc1.1.6.L186.B0,Opus
video/mp4;codecs=hev1.1.6.L186.B0,mp4a.40.2
video/mp4;codecs=hev1.1.6.L186.B0,Opus

Die Syntaxen der unterstützten Codecs sehen wie folgt aus:

hvc1[.A.B.C.D] (HEVC Video)

Der Wert beginnt mit dem vierstelligen Bezeichner des Codecs (hvc1), gefolgt von vier oder mehr Werten, die durch Punkte (.) getrennt sind:

A

Der general_profile_space. Dies wird als ein oder zwei Zeichen codiert:

• Das erste ist ein Buchstabe A, B oder C, der general_profile_space 1, 2 oder 3 repräsentiert, oder kein Buchstabe, der general_profile_space 0 repräsentiert.
• Das zweite ist eine Dezimalnummer, die den general_profile_idc darstellt.

  Hinweis: In den obigen Beispielen bedeutet der Wert 1, dass general_profile_space === 0 (kein Buchstabe) und general_profile_idc === 1.

B

Ein 32-Bit-Wert, der ein oder mehrere Allgemeine Profilkompatibilitäts-Flags (general_profile_compatibility_flag) darstellt. Codiert in hexadezimalem Format (führende Nullen können weggelassen werden) und in umgekehrter Bit-Reihenfolge von den bedeutendsten bis zu den unbedeutendsten. Die Werte können von 31 (bedeutendsten) bis 0 (unbedeutendsten) reichen und werden in ISO/IEC 23008-2 spezifiziert.

Hinweis: In den obigen Beispielen bedeutet der Wert 6, dass general_profile_compatibility_flag === 6.

C

Das general_tier_flag, codiert als L (general_tier_flag === 0) oder H (general_tier_flag === 1), gefolgt vom general_level_idc, codiert als Dezimalzahl.

Hinweis: In den obigen Beispielen bedeutet der Wert L186, dass general_tier_flag === 0, gefolgt von general_level_idc === 186.

D

Ein oder mehrere 6-Byte Constraint Flags. Beachten Sie, dass jedes Flag als hexadezimale Zahl codiert wird und durch einen zusätzlichen Punkt getrennt wird; Anhängende Bytes, die null sind, können weggelassen werden.

Hinweis: In den obigen Beispielen ist nur ein Constraint-Flag vorhanden — B0.

hev1[.A.B.C.D] (Variable Resolution HEVC)

Die hev1-Codec-Parameter haben die gleiche Syntax wie die hvc1-Codec-Parameter.

WebM

Die Grundform für einen codecs-Parameter von WebM besteht darin, einen oder mehrere der vier WebM-Codecs durch Kommas getrennt nach Name aufzuführen. Die nachstehende Tabelle zeigt einige Beispiele:

Die Zeichenfolgen vp8.0 und vp9.0 funktionieren ebenfalls, werden jedoch nicht empfohlen.

Verwendung des codecs-Parameters

Sie können den codecs-Parameter in einigen Situationen verwenden. Erstens können Sie ihn mit dem <source>-Element verwenden, um ein <audio>- oder <video>-Element zu erstellen, um eine Gruppe von Optionen festzulegen, aus denen der Browser bei der Auswahl des Medienformats auswählen kann, das dem Benutzer im Element präsentiert werden soll.

Sie können den codecs-Parameter auch verwenden, wenn Sie einen MIME-Medientyp an die Methode MediaSource.isTypeSupported() übergeben; diese Methode gibt ein Boolean zurück, das angibt, ob das Medium auf dem aktuellen Gerät wahrscheinlich funktioniert oder nicht.

Siehe auch

• Web-Medientechnologien
• Das <source>-Element, Unterelement der <audio>- und <video>-Elemente
• Leitfaden zu Medientypen und -formaten im Web
• Leitfaden zu Audio-Codecs im Web
• Leitfaden zu Video-Codecs im Web
• Codecs, die von WebRTC verwendet werden
• Den korrekten HTML-Codecs-Parameter für ein AV1-Video erhalten
• High Efficiency Video Coding auf Wikipedia