M4S 形式とは?
M4S は、MPEG-DASH や現在の HLS で使用される、フラグメント化 MP4 のメディアセグメントで一般的な拡張子です。通常、セグメントのトラック設定やデコーダー設定には、初期化セグメントが必要です。
M4S 形式の仕組み
M4S メディアセグメントは、アダプティブストリーミング用にエンコーダーの出力を分割した後に生成される、短いフラグメント化 MP4 リソースです。ムービーフラグメントのメタデータは、サンプルのタイミングと位置を対応付け、対になるメディアデータボックスはエンコード済みサンプルを格納します。トラック定義とデコーダー設定は通常、マニフェストが参照する初期化リソースに格納されます。パッケージャーによっては、このリソースの名前にも .m4s を使用します。プレーヤーはバッファリングや表現の切り替えを行いながら、この設定と後続のフラグメントを組み合わせます。
要点
- メディアセグメントは、一つ以上のムービーフラグメントで構成されます。サンプルを記述する
moofボックスの後に、エンコード済みバイトを格納する一つ以上のmdatボックスが続きます。その前に、任意でstypセグメントタイプボックスを配置できます。moovボックスは含まれないため、デコーダーが必要とするトラックとサンプルの記述はこのファイルにはありません。 - 初期化セグメントは、メディアセグメントにない情報を提供します。
ftypボックスに続くmoovボックスに、トラックとサンプルの記述を格納しますが、サンプル自体は含みません。HLS では、すべてのフラグメント化 MP4 メディアセグメントに、適用対象のEXT-X-MAPタグが必要です。その URI は、初期化データを格納するリソースを示します。一つのタグは、次のEXT-X-MAPまでのすべての後続セグメントに適用されます。Media Source Extensions では、セグメントタイプボックスを持たないメディアセグメントは、初期化セグメントで宣言されたブランドに準拠する必要があります。 - 拡張子だけでは、ファイルがどちらの種類かは判断できません。
.m4sは、video/iso.segmentメディアタイプの拡張子として IANA に登録されていますが、ファイル名はパッケージャーが決めます。FFmpeg の DASH マルチプレクサーが MP4 セグメントを個別のファイルとして書き出す場合、デフォルトでは初期化セグメントとメディアセグメントの両方に.m4s拡張子を使用します。(VP8、VP9、Vorbis、Opus のストリームでは、デフォルトで.webmという名前の WebM セグメントを使用します。)一方、HLS マルチプレクサーは、フラグメント化 MP4 の初期化ファイルにデフォルトでinit.mp4という名前を付けます。ファイルの役割は、マニフェストまたは最上位のボックスで確認してください。 .m4sという名前だけでは、CMAF 準拠とは判断できません。CMAF は、フラグメント化 MP4 にさらに制約を加えたプロファイルであり、FFmpeg は CMAF 互換出力と DASH 互換出力を別々のマルチプレクサーモードとして扱います。対象プロトコルが実際に求める要件は具体的です。たとえば HLS は、各トラックフラグメントにtfdtボックスを含めることと、ムービーフラグメント相対のアドレス指定を要求し、CMAF セグメントはこれらの要件を満たすと説明しています。
M4S 形式が重要になる場面
M4S は、分割されたストリームのパッケージ化、ホスティング、移動、デバッグで重要になります。メディアセグメントは単独の動画ファイルではありません。パーサーで読み取るには、対応する初期化データが必要です。プレーヤーはマニフェストやプレイリストを通じて、両方のデータを見つけます。ストリームを移動、整理、キャッシュする際は、マニフェストの参照を有効に保ち、参照先の初期化セグメントとメディアセグメントをすべて利用できる状態にしてください。.m4s のメディアセグメントだけを取り出しても、汎用コンバーターに渡せるものではありません。
M4S 形式での Transloadit の活用
Transloadit の Robot /video/adaptive のドキュメントでは、technique パラメーターの値として cmaf が説明されています。この値を指定すると、同じフラグメント化 MP4 セグメントを参照する MPEG-DASH と HLS のマニフェストを生成します。
Robot のドキュメントでは、セグメントと初期化セグメントについて説明していますが、ファイル拡張子は明記していません。そのため、.m4s という名前を前提にツールを構築しないでください。一方、各結果ファイルには、マニフェストが想定する場所にファイルを保存するための
relative_path メタデータプロパティが含まれると記載されています。
出典
- IANA メディアタイプ登録:video/iso.segment(ファイル拡張子 m4s、ISO/IEC 14496-12 セグメント)
- W3C:ISO BMFF バイトストリーム形式(初期化セグメントとメディアセグメント)
- RFC 8216:HTTP Live Streaming、3.1 節(対応メディアセグメント形式)、3.3 節(フラグメント化 MPEG-4)、4.3.2.5 節(EXT-X-MAP)
- FFmpeg 形式ドキュメント:dash マルチプレクサー(init_seg_name、media_seg_name)、hls マルチプレクサー(hls_segment_type、hls_fmp4_init_filename)、movflags(cmaf、dash)
- FFmpeg 8.0 ソース:libavformat/dashenc.c(セグメントのファイル拡張子の選択)
- Apple:HTTP Live Streaming(HLS)での Common Media Application Format について