Videos in HLS, MPEG-Dash und CMAF konvertieren

🤖/video/adaptive codiert Videos in Formate, die HTTP Live Streaming (HLS), MPEG-Dash und CMAF unterstützen, und erzeugt die erforderlichen Manifest- und Playlist-Dateien.

Access-Control-Allow-Origin: *
Access-Control-Allow-Methods: GET
Access-Control-Allow-Headers: *

[
  {
    "AllowedHeaders": ["*"],
    "AllowedMethods": ["GET"],
    "AllowedOrigins": ["*"],
    "ExposeHeaders": []
  }
]

Anwendungsbeispiel

{
  "steps": {
    ":original": {
      "robot": "/upload/handle"
    },
    "encoded_1080p": {
      "ffmpeg_stack": "v7",
      "preset": "hls/1080p",
      "robot": "/video/encode",
      "use": ":original"
    },
    "encoded_480p": {
      "ffmpeg_stack": "v7",
      "preset": "hls/480p",
      "robot": "/video/encode",
      "use": ":original"
    },
    "encoded_720p": {
      "ffmpeg_stack": "v7",
      "preset": "hls/720p",
      "robot": "/video/encode",
      "use": ":original"
    },
    "hls_bundled": {
      "playlist_name": "my_playlist.m3u8",
      "robot": "/video/adaptive",
      "technique": "hls",
      "use": {
        "bundle_steps": true,
        "steps": [
          "encoded_480p",
          "encoded_720p",
          "encoded_1080p"
        ]
      }
    }
  }
}

Parameter

• interpolate

  boolean | Record<string, boolean>

  Steuert, ob einzelne Robot-Anweisungsfelder Assembly Variables interpolieren.

  Standardmäßig interpolieren die meisten Robot-Anweisungsfelder Assembly Variables. Mit dem Wert false behandeln Sie alle Anweisungsfelder als Literaltext. Wenn Sie stattdessen einen einzelnen Feldpfad auf false setzen, wird nur dieses Feld als Literaltext behandelt. Bei Feldern eines bestimmten Robots, die standardmäßig als Literaltext behandelt werden, aktivieren Sie die Interpolation wieder, indem Sie hierfür true festlegen oder für den jeweiligen Feldpfad den Wert true verwenden.

  Verwenden Sie Feldnamen wie path oder für verschachtelte Objekte Punktpfade wie ffmpeg.vf als Pfadangabe.

• output_meta

  Record<string, boolean> | boolean | Array<string>

  Damit können Sie eine Reihe von Metadaten festlegen, deren Berechnung mehr CPU-Ressourcen beansprucht. Sie sind daher standardmäßig deaktiviert, damit Ihre Assemblies schnell verarbeitet werden.

  Für Bilder können Sie diesem Objekt den Eintrag "has_transparency": true hinzufügen, um zu ermitteln, ob das Bild transparente Bereiche enthält. Mit dem Eintrag "dominant_colors": true können Sie außerdem ein Array mit hexadezimalen Farbcodes aus dem Bild extrahieren.

  Für Bilder können Sie auch den Eintrag "blurhash": true hinzufügen, um einen BlurHash⁠ als String zu extrahieren – eine kompakte Darstellung eines Platzhalters für das Bild, mit der Sie eine unscharfe Vorschau anzeigen können, während das vollständige Bild geladen wird.

  Für Bilder extrahiert der Eintrag "thumbhash": true stattdessen einen base64-codierten ThumbHash⁠ nach meta.thumbhash, zusammen mit meta.has_alpha (gibt an, ob ein Alphakanal vorhanden ist, auch wenn das Bild vollständig deckend ist). Der Hash beschreibt die Pixel gemäß EXIF-Ausrichtung und verwendet bei animierten Bildern das erste Frame. Die Extraktion erfolgt nach dem Best-Effort-Prinzip: Bilder über 40 Megapixeln, nicht unterstützte Formate oder ein fehlgeschlagener bzw. durch Grenzwerte beschränkter Decodiervorgang erzeugen keinen Platzhalter. Eine erfolgreiche Extraktion verursacht eine zusätzliche Metadatengebühr in Höhe von 20 % der Bytes dieser Datei. Ist die Option deaktiviert oder wird kein Hash erzeugt, fällt kein ThumbHash-Aufschlag an.

  Setzen Sie diese Option für den Step, der das Bild erzeugt, etwa /upload/handle für hochgeladene Originale oder /image/resize für verarbeitete Ausgaben. Wird sie nur für /transloadit/store gesetzt, wird keine Extraktion angefordert: Die Speicherung behält die Metadaten des erzeugenden Steps bei. Transloadit Storage speichert einen erzeugten Hash dauerhaft zusammen mit seiner unveränderlichen Version und gibt ihn in gespeicherten Ergebnissen sowie beim nativen Lesen von Assets zurück. Direkte S3-Uploads erzeugen keine Platzhalter. Ein Platzhalter enthält Bildinformationen; schützen Sie ihn daher mit denselben Zugriffskontrollen wie das vollständige Bild.

  Für Videos können Sie den Parameter "colorspace": true hinzufügen, um den Farbraum des Ausgabevideos zu extrahieren.

  Für Videos können Sie außerdem den Eintrag "interlaced": true hinzufügen, um zu erkennen, ob das Video im Zeilensprungverfahren vorliegt. Dazu wird die ressourcenschonende ffprobe-Option field_order mit einem begrenzten Stichprobendurchlauf mithilfe von idet über die ersten Frames der Quelle kombiniert. Die Ergebnisse interlaced und field_order sowie das Diagnoseobjekt interlace_detection werden dabei unter file.meta ausgegeben. Dies ist rechenintensiv und wird entsprechend abgerechnet.

  Für Audio können Sie den Eintrag "mean_volume": true hinzufügen, um einen einzelnen Wert für die durchschnittliche Lautstärke der Audiodatei zu erhalten.

  Sie können diesen Parameter auch auf false setzen, um die Metadatenextraktion zu überspringen und das Transkodieren zu beschleunigen.

• user_meta

  Record<string, any>(Standard: {})

  Fügt jeder ausgegebenen Datei benutzerdefinierte JSON-Metadaten hinzu, ohne den Dateiinhalt zu verändern. Verschachtelte Objekte und Arrays werden unterstützt.

  Die Vererbung hängt vom Robot ab. Die Werte werden mit vorhandenen user_meta der Ausgabedatei zusammengeführt; der aktuelle Step ersetzt übereinstimmende Schlüssel auf oberster Ebene. Weisen Sie erforderliche Schlüssel explizit zu, wenn ein Robot neue Ausgabedateien erstellt.

  In Steps zur Verarbeitung bezieht sich ${file.*} auf die erste Eingabe und ${result.*} auf die ausgegebene Datei. Die Werte werden nach der Ausführung des Robots für jede Ausgabedatei ausgewertet, bevor die anschließende Metadatenextraktion und temporäre Speicherung erfolgen. Bei :original werden die Werte für jeden Upload vor der Metadatenextraktion ausgewertet.

  Nachfolgende Steps lesen ${file.user_meta.key}. Ein vollständiges Beispiel und die Vererbungsregeln finden Sie unter Benutzerdefinierte Metadaten.

• result

  boolean(Standard: false)

  Ob die Ergebnisse dieses Steps im Assembly Status JSON enthalten sein sollen

• queue

  batch

  Wenn Sie die Queue auf „batch“ setzen, wird die Priorität der Jobs für diesen Step manuell herabgestuft. So vermeiden Sie, Priority Job Slots für Jobs zu belegen, die keine Wartezeit von null in der Queue benötigen.

• force_accept

  boolean(Standard: false)

  Erzwingt, dass ein Robot einen Dateityp akzeptiert, den er sonst ignorieren würde.

  Standardmäßig ignorieren Robots Dateien, deren Typ sie nicht kennen. 🤖/video/encode ignoriert beispielsweise problemlos Eingabebilder.

  Wenn Sie den Parameter force_accept auf true setzen, können Sie erzwingen, dass Robots alle übergebenen Dateien akzeptieren. Dies führt in der Regel zu Fehlern und sollte nur zur Fehlersuche oder zur Behandlung von Grenzfällen verwendet werden.

• ignore_errors

  boolean | Array<meta | execute>(Standard: [])

  Fehler in bestimmten Verarbeitungsphasen ignorieren.

  Wenn Sie hierfür ["meta"] festlegen, ignoriert der Robot Fehler bei der Metadatenextraktion.

  Wenn Sie hierfür ["execute"] festlegen, ignoriert der Robot Fehler während der Hauptausführungsphase.

  Wenn Sie hierfür true festlegen, entspricht dies ["meta", "execute"] und Fehler in beiden Phasen werden ignoriert.

• use

  string | Array<string> | Array<object> | object

  Gibt an, welche Steps als Eingabe verwendet werden sollen.

  • Sie können beliebige Namen für Steps wählen, außer ":original" (reserviert für von Transloadit verarbeitete Benutzer-Uploads)
  • Sie können mehrere Steps mithilfe von Arrays als Eingabe angeben:

    {
      "use": [
        ":original",
        "encoded",
        "resized"
      ]
    }
    

  • Sie können Eingabe-Steps außerdem mit as kennzeichnen, um Robots die semantische Funktion zu übermitteln:

    {
      "use": [
        {
          "name": ":original",
          "as": "image"
        },
        {
          "name": ":original",
          "as": "mask"
        }
      ]
    }
    

  Tipp

  Das ist wahrscheinlich alles, was Sie über use wissen müssen. Sie können sich jedoch auch die erweiterten Anwendungsfälle ansehen.

• ffmpeg

  object

  Benutzerdefinierte FFmpeg-Optionen werden für die Techniken "hls" und "cmaf" unterstützt. Nicht leere benutzerdefinierte Optionen werden für "dash", die Standardtechnik, abgelehnt.

  Diese Optionen gelten für den Packaging-Befehl, der die Eingabestreams standardmäßig kopiert. Legen Sie Encoding-Optionen, etwa Keyframe-Intervalle, im vorangehenden Step mit 🤖/video/encode fest.

• ffmpeg_stack

  v6 | v7 | v8 | string(Standard: "v7.0.0")

  Wählt den FFmpeg-Stack für das Packaging aus. Der Standardwert ist "v7.0.0". Dieser Robot verwendet immer mindestens "v7.0.0"; ältere Stack-Auswahlen werden automatisch hochgestuft.

• width

  string | number | null

  Dieser Parameter hat bei diesem Robot keine Wirkung. Legen Sie die Breite der Variante im vorangehenden Step mit 🤖/video/encode fest.

• height

  string | number | null

  Dieser Parameter hat bei diesem Robot keine Wirkung. Legen Sie die Höhe der Variante im vorangehenden Step mit 🤖/video/encode fest.

• preset

  android | android-high | android-low | android_high | android_low | dash-1080p-video | dash-1080p_video | 195 weitere ↓

  Dieser Parameter hat bei diesem Robot keine Wirkung. Legen Sie die Encoding-Voreinstellung im vorangehenden Step mit 🤖/video/encode fest.

• technique

  dash | hls | cmaf(Standard: "dash")

  Legt fest, welche Streaming-Technik verwendet werden soll. Unterstützt "dash" für MPEG-Dash, "hls" für HTTP Live Streaming und "cmaf" für eine FFmpeg-basierte CMAF-Ausgabe mit MPEG-Dash- und HLS-Manifesten, die auf dieselben fMP4-Segmente verweisen.

• playlist_name

  string

  Der Dateiname der generierten Manifest-/Playlist-Datei. Der Standardwert ist "playlist.mpd", wenn technique den Wert "dash" hat, und "playlist.m3u8", wenn technique den Wert "hls" hat. Bei "cmaf" benennt dieser Wert das MPEG-Dash-Manifest; der Standardwert ist "playlist.mpd".

• hls_playlist_name

  string

  Wird nur verwendet, wenn technique den Wert "cmaf" hat. Legt den Dateinamen für die generierte HLS-Master-Playlist fest. Der Standardwert ist "playlist.m3u8".

• segment_duration

  string | number

  Die Dauer jedes Segments in Sekunden. Wenn kein Wert angegeben ist, gilt für MPEG-Dash und CMAF ein Standardwert von 4 Sekunden und für HLS von 10 Sekunden.

• closed_captions

  boolean(Standard: true)

  Legt fest, ob bei Verwendung der Technik "hls" Closed Captions unterstützt werden sollen.

• audio_group

  boolean(Standard: false)

  Wenn der Wert auf true gesetzt ist und die Technik "hls" verwendet wird, werden reine Audio-Eingabedateien als alternative Audiovarianten statt als eigenständige Streamvarianten behandelt. Dadurch können Player die Auswahl einer Audiospur anbieten, beispielsweise für mehrere Sprachen. Reine Audiodateien werden in der Multivarianten-Playlist als Einträge vom Typ #EXT-X-MEDIA:TYPE=AUDIO aufgeführt, und Videovarianten verweisen über das Attribut AUDIO auf sie.

  Wenn diese Option aktiviert ist, enthalten die Ausgabesegmente von Videoeingaben nur deren Videostream (gemuxtes Audio wird ausgeschlossen). Stellen Sie Audio separat als reine Audio-Eingabedateien bereit.

  Der Wert für LANGUAGE jeder Variante stammt aus dem Tag language des ersten Audiostreams in ihrer reinen Audio-Eingabedatei oder lautet "und", wenn das Tag fehlt. Setzen Sie das Tag beispielsweise auf 🤖/audio/encode mit "ffmpeg": {"metadata:s:a:0": "language=deu"}.

  Die erste reine Audio-Eingabe in der Reihenfolge von use.steps wird zu DEFAULT=YES; die anderen Varianten haben DEFAULT=NO. Alle Audiovarianten haben AUTOSELECT=YES. Als NAME wird das Tag title des Audiostreams verwendet, sofern vorhanden, andernfalls der englische Name der Sprache (zum Beispiel wird "eng" zu „English“ und "deu" zu „German“). Audio ohne Tag erhält den Namen „Unknown“; nicht erkannte Sprachcodes werden als Name verwendet. Doppelte Namen erhalten ein numerisches Suffix.

  Diese Option aktiviert nur alternative Audiovarianten mit der Technik "hls" und ändert das Packaging mit "dash" oder "cmaf" nicht. CMAF fasst alles Audio in einem Adaptation Set zusammen, das nach der Sprache des ersten Audios benannt ist. Wenn Sie audio_group: true mit CMAF setzen oder CMAF-Eingaben mit mehr als einer bekannten Audiosprache bereitstellen (einschließlich in einem einzelnen Video gemuxter Spuren), wird eine Warnung zur Assembly hinzugefügt; das Packaging läuft mit der vorhandenen CMAF-Ausgabe weiter. Verwenden Sie für mehrsprachiges Audio technique: "hls" mit audio_group: true.

Demos

Verwandte Blogbeiträge