画像内の顔検出
🤖/image/facedetect は画像内の顔を検出し、その座標、または顔そのものを新しい画像として返せます。

抽出した顔の周囲に余白を指定して、用途に合わせて出力を調整できます。
この Robot は、🤖/image/resizeと組み合わせることで、リサイズと最適化を行った画像をウェブサイトやアプリで最大限に活用できます。
精度を向上させる方法:
- 画像の向きが正しいことを確認してください。この Robot は、画像内の顔が正立し、回転していない場合に最も高い性能を発揮します。
- Robot が顔以外の物体を検出する場合は、
"faces": "max-confidence"を Template 内で使用して、信頼度が最も高い検出結果のみを選択できます。 - 返される検出結果の数は、
min_confidenceパラメーターでも制御できます。値を大きくすると結果は少なくなりますが、各結果の信頼度は高くなります。一方、値を小さくすると結果は多くなりますが、顔以外の物体も含まれる場合があります。
使用例
アップロードした画像内のすべての顔を検出し、切り抜いて個別の画像として保存します:
{
"steps": {
"faces_detected": {
"crop": true,
"crop_padding": "10px",
"faces": "each",
"robot": "/image/facedetect",
"use": ":original"
}
}
}パラメーター
interpolateboolean | Record<string, boolean>処理設定の各フィールドで Assembly Variables を展開するかどうかを制御します。
デフォルトでは、Robot の処理設定のほとんどのフィールドで Assembly Variables が展開されます。すべての設定フィールドをリテラルテキストとして扱うには、このパラメーターを
falseに設定してください。特定のフィールドだけをリテラルテキストとして扱うには、そのフィールドのパスをfalseに設定してください。デフォルトでリテラルとして扱われる Robot 固有のフィールドで展開を有効にするには、このパラメーターをtrueに設定するか、そのフィールドのパスをtrueに設定してください。pathのようなフィールド名を使用してください。ネストされたオブジェクトには、ffmpeg.vfのようなドット区切りのパスを使用してください。output_metaRecord<string, boolean> | boolean | Array<string>算出に多くの CPU リソースを要するメタデータを指定できます。Assembly の処理速度を維持するため、これらはデフォルトで無効になっています。
画像の場合、このオブジェクトに
"has_transparency": trueを追加すると、画像に透明な部分が含まれるかどうかを抽出できます。"dominant_colors": trueを追加すると、画像から 16 進数のカラーコードの配列を抽出できます。画像の場合、
"blurhash": trueを追加すると、画像のプレースホルダーをコンパクトに表す BlurHash 文字列も抽出できます。画像全体の読み込み中に、ぼかしたプレビューを表示するのに役立ちます。画像の場合、代わりに
"thumbhash": trueを使用すると、base64 エンコードされた ThumbHash をmeta.thumbhashに抽出し、meta.has_alpha(完全に不透明な場合も含め、アルファチャンネルが存在するかどうか)も抽出します。ThumbHash は EXIF の向きを反映したピクセルを表し、アニメーション画像では最初のフレームを使用します。抽出はベストエフォートです。40 メガピクセルを超える画像、非対応の形式、デコードの失敗やデコード処理の上限への到達があった場合、プレースホルダーは生成されません。抽出に成功すると、そのファイルのバイト数の 20% に相当するメタデータ料金が加算されます。無効な場合やハッシュが生成されない場合、ThumbHash の追加料金は発生しません。このオプションは画像を生成する Step に設定してください。たとえば、アップロードされた元画像では
/upload/handle、処理済みの出力では/image/resizeに設定します。/transloadit/storeにのみ設定しても、抽出は要求されません。ストレージは生成元のメタデータを保持します。Transloadit Storage は生成されたハッシュをその不変のバージョンとともに永続化し、保存済みの結果やネイティブのアセット読み取り時に返します。S3 への直接アップロードではプレースホルダーは生成されません。プレースホルダーには画像情報が含まれるため、画像全体と同じアクセス制御で保護してください。動画の場合、
"colorspace": trueパラメーターを追加すると、出力動画の色空間を抽出できます。動画の場合、
"interlaced": trueを追加すると、インターレース動画かどうかも検出できます。これは、低コストの ffprobe のfield_orderフラグと、ソースの先頭フレームに対する処理範囲を制限したidetサンプリング処理を組み合わせ、file.metaの下にinterlaced、field_order、診断用のinterlace_detectionオブジェクトを出力します。この処理は計算コストが高く、それに応じて課金されます。音声の場合、
"mean_volume": trueを追加すると、音声ファイルの平均音量を表す単一の値を取得できます。また、
falseに設定すると、メタデータの抽出をスキップしてトランスコードを高速化できます。user_metaRecord<string, any>(デフォルト:{})出力される各ファイルに、ファイルの内容を変更せずにカスタム JSON メタデータを追加します。ネストしたオブジェクトと配列に対応しています。
継承の動作は Robot によって異なります。値は出力ファイルの既存の
user_metaとマージされ、一致するトップレベルのキーは現在の Step によって置き換えられます。Robot が新しい出力を作成する場合は、必要なキーを明示的に割り当ててください。処理 Step では、
${file.*}は最初の入力を、${result.*}は出力されるファイルを参照します。値は Robot の実行後、後続のメタデータ抽出と一時保存の前に、出力ごとに評価されます。:originalでは、メタデータ抽出の前にアップロードごとに値が評価されます。後続の Step は
${file.user_meta.key}を読み取ります。完全な例と継承ルールについては、カスタムメタデータ を参照してください。resultboolean(デフォルト:false)この Step の結果を Assembly Status JSON に含めるかどうか
queuebatchqueue を 'batch' に設定すると、このステップのジョブの優先度を手動で下げ、キューの待ち時間がゼロである必要のないジョブが優先ジョブスロットを消費しないようにします。
force_acceptboolean(デフォルト:false)通常は無視するファイルタイプを Robot に強制的に受け入れさせます。
デフォルトでは、Robot は認識できないファイルを無視します。たとえば、🤖/video/encodeは入力画像を無視します。
force_acceptパラメーターをtrueに設定すると、Robot に渡されたすべてのファイルを強制的に受け入れさせることができます。通常、この設定はエラーにつながるため、デバッグやエッジケースへの対処にのみ使用してください。ignore_errorsboolean | Array<meta | execute>(デフォルト:[])処理の特定のフェーズでエラーを無視します。
このパラメーターを
["meta"]に設定すると、Robot はメタデータ抽出中のエラーを無視します。このパラメーターを
["execute"]に設定すると、Robot はメイン実行フェーズ中のエラーを無視します。このパラメーターを
trueに設定すると、["meta", "execute"]と同じ動作になり、両方のフェーズでエラーを無視します。usestring | Array<string> | Array<object> | object入力として使用する Step を指定します。
- Step には任意の名前を付けられます。ただし、
":original"は Transloadit が処理するユーザーアップロード用に予約されています。 - 配列を使用して、複数の Step を入力として指定できます。
{ "use": [ ":original", "encoded", "resized" ] } - 入力 Step に
asでタグを付けて、意味上の用途を Robot に伝えることもできます。{ "use": [ { "name": ":original", "as": "image" }, { "name": ":original", "as": "mask" } ] }
ヒントuseについては、通常ここまでの内容で十分ですが、高度な使用例 も参照できます。- Step には任意の名前を付けられます。ただし、
providerauto | aws | gcp(デフォルト:"auto")リクエストに基づいて最適なプロバイダーを選択します。
自動選択を上書きするには、特定のプロバイダーを選択してください。
cropboolean(デフォルト:false)検出された顔を抽出するかどうかを指定します。このオプションを
falseに設定すると、Robot は入力画像をそのまま返し、検出されたすべての顔の座標を結果 JSON のfile.meta.facesに追加します。このパラメーターをtrueに設定すると、Robot は検出されたすべての顔を画像として出力します。crop_paddingstring(デフォルト:"5px")cropがtrueに設定されている場合に、抽出した顔画像に追加する余白の量を指定します。値はpx(ピクセル)または%(各顔画像の幅と高さに対する割合)で指定できます。formatjpg | png | preserve | tiff(デフォルト:"preserve")cropがtrueに設定されている場合に、抽出した顔画像の出力形式を指定します。デフォルト値の
"preserve"は、入力画像の形式を再利用することを意味します。min_confidencestring | number(デフォルト:70)検出された顔に必要な最小信頼度を指定します。このしきい値より信頼度の値が高い顔のみが結果に含まれます。
faceseach | group | max-confidence | max-size | string | number(デフォルト:"each")検出された顔のうち、どれを返すかを指定します。有効な値は次のとおりです。
"each"— 各顔を個別に返します。"max-confidence"— 信頼度の値が最も高い顔のみを返します。"max-size"— 面積が最も大きい顔のみを返します。"group"— 検出されたすべての顔を、それらを囲む一つの長方形にまとめます。- 任意の整数 — 顔を左上隅の位置で並べ替え、指定した整数をインデックスとして返す顔を決定します。インデックスはゼロ始まりのため、
faces: 0を指定すると最初の顔を返します。指定したインデックスに対応する顔がなければ、出力は生成されません。
以下の例で使用する入力画像です。

faces: "each"の適用結果:

faces: "max-confidence"の適用結果:
faces: "max-size"の適用結果:
faces: "group"の適用結果:
faces: 0の適用結果:
デモ
関連ブログ記事
- 画像の顔検出 Robot を公開
- 今後の Transloadit のお客様向け新料金モデル
- 画像の顔検出に新登場した「faces」パラメーター
- DigitalOcean Spaces へのファイルエクスポートを簡単に
- Tech preview:メディア処理を強化する新しい AI Robot
- Transloadit の 2021年の節目と進歩
- AI 顔検出で進化した Smart CDN
- Transloadit の 2022 年の節目:成長とイノベーション
- Transloadit で写真の顔をぼかす方法
- AI Robot による PDF からのテキスト抽出のご紹介
- コンテンツに応じた切り抜きで被写体をフレーム内に保持