Encoding Job とは?
Encoding Job は、エンコード用マシン上で実行される 1 件の動画エンコードや画像リサイズなど、Transloadit における最小の処理単位です。この名称は歴史的なものですが、Robot の操作は、コーデック処理だけでなく、インポート、エクスポート、メタデータ抽出も含めて Encoding Jobs としてスケジュールされます。
Encoding Job の仕組み
Transloadit の Assembly 内では、ワークフローグラフによって、メディア素材に適用する処理操作がスケジュール可能な作業に変換されます。依存関係のエッジは、下流のタスクが使用する出力の準備が整うまでそのタスクを待機させますが、関連のない分岐は独立して進行できます。つまり、Job は実行と処理容量に関わる単位であり、Assembly は連携先から見える、処理を統括するワークフローであり、再実行を要求する単位でもあります。ステータスの集約によって、これらの細かな処理結果が元の大きなリクエストに対応付けられます。
要点
- Step がアップロードされたファイルごとに処理を分岐させたり、複数の派生ファイルを作成したりすると、一つの Assembly から多数の Job が生成されるため、API への送信回数は処理需要の信頼できる指標にはなりません。
- Encoding Job で、その Step の
ignore_errors設定の対象外となるエラーが発生すると、Assembly 全体が終了し、独立した分岐も含めて残りの Job の中止がベストエフォートで開始されます。復旧は Assembly 単位で行います。Assembly の再実行では、一つの Job を再試行するのではなく、新しい Assembly としてワークフローを再実行します。 - Job のコストと所要時間は、ファイルサイズだけでなく、入力の複雑さや操作の種類によって変わります。また、Turbo Mode の動画エンコードはセグメントごとの Job に分割され、各 Job がそれぞれ Job スロットを使用します。
Encoding Job が重要になる場面
開発者は、ワークフローの処理容量、コスト、同時実行数を計画する際に Job 数を見積もります。復旧は Assembly 単位で行います。異常終了した Assembly は新しい Assembly として再実行できるため、失敗した個々の Job だけを再試行できると想定せず、ワークフロー全体の再実行コストを考慮して設計してください。