サムネイルストーリーボードとは
サムネイルストーリーボードは、動画全体から抽出したプレビューフレームを順番に並べたもので、スプライトシートにまとめることがよくあります。タイミングメタデータによって、各画像領域を対応する再生位置に関連付けます。
サムネイルストーリーボードの仕組み
ストーリーボード生成ツールは、既知の時刻のフレームを選択して同じサイズのセルに縮小し、多数のセルを一つ以上のスプライト画像に配置します。別途用意するメタデータには、各キューの時間範囲と、視聴者がシークしたりホバーしたりした際にスプライトから切り抜く矩形領域を記述します。画像をまとめることで、区間ごとに個別のプレビューを取得する場合よりも画像リクエスト数を削減できます。この派生データは動画の時間情報が確定した後に作成され、プレーヤーの操作部、CDN 配信、キャッシュポリシーで連携して利用されます。
要点
- プレーヤーには時間の対応付けと空間座標の両方が必要です。メタデータを再生成せずにセルサイズ、グリッドの順序、スプライトのページ分割を変更すると、画像自体は有効でも、誤ったプレビューが表示されます。
- 厳密に等間隔で抽出すると、黒いフレームや場面転換中のフレームが選ばれることがあります。そのため生成ツールでは、視覚的な有用性を高めるために、近くの代表的な画像を探したり、シーンを考慮して選択したりする場合があります。
- 大きなスプライトはリクエスト数を減らしますが、デコード時のメモリ使用量が増えます。また、視聴者がタイムラインの短い区間しか確認しない場合は無駄な転送が増えるため、シートサイズは配信上のトレードオフになります。
サムネイルストーリーボードが重要になる場面
視聴者がシークバーにホバーしたり、スクラブ操作をしたりする際の視覚的なプレビュー表示に、ストーリーボードを使用します。スプライトの座標やタイミングメタデータが誤っていると、生成した画像が有効でも、誤ったフレームが表示されます。