FFmpeg でグリーンスクリーンを除去:動画のクロマキー処理
グリーンスクリーンを使って撮影し、その背景を除去する作業は手間がかかります。ただし、条件がよければ、一部を自動化するだけでも多くの時間を節約できます。Transloadit では細かな作業の自動化が大好きです。そこで、FFmpeg と Transloadit を使い、動画のグリーンスクリーンをクロマキー処理で自動的に除去して、背景を透過にする方法を見ていきましょう。
FFmpeg でグリーンスクリーンを最も手早く除去するには、colorkey フィルターで指定した色を透明にしてから、アルファチャンネルに対応する形式にエンコードします。コマンド自体と同じくらい、適切な照明と色むらのない背景が重要です。

グリーンスクリーンの仕組みは?
グリーンスクリーンを除去する前に、まずその仕組みを理解しましょう。グリーンスクリーンは被写体の背後に置き、除去しやすい均一な背景を作るものです。通常は肌の色から最も離れたネオングリーンが選ばれますが、青もよく使われます。
背景を除去するには、クロマキー処理で動画の各フレームから緑色だけを取り除き、被写体の背後を透明にします。
FFmpeg コマンド
Assembly Instructions の詳細に入る前に、その内部で何が行われるかを見てみましょう 🔎
Transloadit では、複数の CLI ツールを使ってファイルをトランスコードしています。そのうちのひとつが、評価の高い FFmpeg です。動画、音声、画像をトランスコードする多くの Robot で使用しています。
Template を作成する前に、まず FFmpeg コマンドを使ってローカルで処理を試せます。その後、FFmpeg コマンドを Assembly Instructions に変換すれば、Transloadit の利便性と速度を活用できます。
動画からグリーンスクリーンを除去するコマンドは次のとおりです。
ffmpeg -i input.mp4 -vf 'colorkey=0x00FF00:similarity=0.2:blend=0.3' -c:v libvpx-vp9 -pix_fmt yuva420p -c:a libopus output.webm
各部分を詳しく見ていきましょう。
まず、i フラグで入力ファイルを指定します。続いて、vf フラグに一連の動画フィルターを渡せます。今回は colorkey フィルターだけを使い、キーカラーを 0x00FF00 に設定します。
colorkey は、similarity と
blend パラメーターで調整できます。これらは、透明にする色をキーカラーにどの程度近い色まで含めるかと、境界の処理の強さを指定します。値を変えながら、結果がどう変わるか試してみてください。
次に、c:v で VP9 エンコーダーを選択し、pix_fmt でアルファチャンネルを持つピクセル形式を要求します。音声は Opus でエンコードします。VP9 やその他のコーデックについて詳しくは、動画圧縮のブログ記事をご覧ください。
最後に、出力の拡張子 .webm で WebM 形式を選択します。この形式は動画の透過に対応しています。
Template
内部で使うコマンドを確認できたので、Template ではどう記述するかを見てみましょう。
{
"steps": {
":original": {
"robot": "/upload/handle"
},
"remove_green_screen": {
"use": ":original",
"robot": "/video/encode",
"result": true,
"ffmpeg_stack": "v7",
"preset": "empty",
"ffmpeg": {
"vf": "colorkey=0x00FF00:similarity=0.2:blend=0.3",
"c:v": "libvpx-vp9",
"pix_fmt": "yuva420p",
"c:a": "libopus",
"f": "webm"
}
},
"exported": {
"use": ["remove_green_screen", ":original"],
"robot": "/s3/store",
"credentials": "demo_s3_credentials",
"url_prefix": "https://demos.transloadit.com/"
}
}
}
ffmpeg パラメーターには、元のコマンドとまったく同じフラグを指定できます。これにより、同じ方法でファイルを操作しながら、Transloadit が提供する追加機能も利用できます。
ここで重要なのは、empty プリセットを使い、指定した以外のエンコードがファイルに行われないようにしている点です。各プリセットの詳細は、プリセットのページをご覧ください。
処理結果
明るい緑色の背景の前に恐竜がいる動画を Template に渡すと、次のような結果になります。
なかなかよい仕上がりです。しかも、すべて自動で処理できました。この方法なら数百のファイルも簡単に処理でき、結果をストレージバケットにエクスポートして、後で取得することもできます。
今回のブログはここまでです。Template 内で FFmpeg を使う仕組みが伝われば幸いです。今後のブログ記事や、当社の開発者が興味深いと感じた記事をチェックするために、以下からニュースレターに登録してみませんか?
