動画デコードとは?

動画デコードは、圧縮された動画ビットストリームから表示可能なフレームを復元する処理です。コーデックの構文を解析し、予測と変換の逆処理を行います。ソフトウェアまたは専用ハードウェアで実行できます。

動画デコードの仕組み

デマルチプレクサーがコンテナーから動画のエレメンタリーストリームを抽出すると、デコーダーはストリームの符号化単位を解析し、予測用の参照画像を復元して、表示順にフレームを出力します。符号化順序と表示順序は異なる場合があるため、タイムスタンプと並べ替えバッファーも処理に使われます。ハードウェア回路は対応するコーデックプロファイルの処理を高速化できます。一方、ソフトウェア処理は計算コストが高いものの、より幅広い柔軟性を提供します。デコードは、取得とデマルチプレクスの後、色変換、合成、表示の前に行われます。

要点

  1. デコーダーは、依存するサンプルを処理する前に、パラメーターセットや初期化レコードなどのコーデック設定を必要とします。設定データが欠落していたり一致しなかったりすると、すべてのセグメントが読み取れなくなる場合があります。
  2. ハードウェアの対応範囲は、コーデックのプロファイル、レベル、ビット深度、クロマ形式ごとに異なります。そのため、コーデックの系統を認識できるだけでは、ハードウェアアクセラレーションによる再生は保証されません。
  3. 予測符号化された画像は、表示順とは異なる順序で保存される場合があります。デコードタイムスタンプと表示タイムスタンプを混同すると、フレームの表示順序が乱れ、映像と音声のずれが生じます。

動画デコードが重要になる場面

対象デバイス向けの配信コーデックを選ぶ前に、デコーダーの利用可否と性能を確認してください。ソフトウェアへのフォールバックは CPU 使用率やバッテリー消費を増やす場合があり、未対応のプロファイルでは再生自体ができなくなる場合があります。

メディアの知識を実用的なパイプラインに

単一の宣言的 API で、アップロード、処理、AI、ストレージ、配信を連携できます。エンコードスタックの管理、スケーリング、形式の変化への対応はお任せください。

Transloadit を無料で試す