複数物体追跡とは?
複数物体追跡は、動画のフレームにわたって物体を検出し、時間が経過しても各物体の識別を一貫して維持する技術です。追跡器は、移動、遮蔽、検出漏れ、再出現を考慮する必要があります。
複数物体追跡の仕組み
複数物体追跡器は、フレーム間の検出結果を関連付け、観測された各対象に永続的なトラック識別子を割り当てます。移動の推定、外観の特徴、空間的な重なり、タイミングはいずれも、関連付けの判断に利用できます。検出結果の出現や消失に伴い、トラックは仮、確定、見失い、終了の状態に移行することがあります。出力は、フレーム単位の検出結果を、分析、編集、イベント処理のロジックに使える軌跡に変換しますが、同一性の継続は確率的なものであり、保証されるわけではありません。
要点
- 検出に基づく追跡システムは、検出器の誤りも引き継ぎます。検出枠の欠落で軌跡が途切れたり、検出枠の重複で一つの物体に複数の識別子が並行して割り当てられたりすることがあります。
- Intersection-over-union は近接するフレーム間の関連付けに有用ですが、遮蔽や急速な移動がある場合は、外観の埋め込み表現や動作モデルがより重要になります。
- 追跡器はすべての物体を検出できても、識別子を繰り返し取り違えることがあるため、評価では位置推定と検出の品質を、関連付けの品質と分けて扱います。
複数物体追跡が重要になる場面
交通分析、スポーツ分析、監視、アノテーションで物体の軌跡が必要な場合は、追跡を適用してください。混雑したシーンや長時間の遮蔽では、識別子が入れ替わったり、一つの物体の軌跡が複数のトラックに分断されたりすることがあります。