行動分類
各クラスに観察可能な定義、正例、混同しやすい事例を用意します。物を拾うことと持つことを別クラスにするか、1つの行動の段階にするかを決めます。説明が似ているだけで統合しません。
似た行動名でも、ラベルのルールは異なる場合があります。動画単位か時間区間かを選ぶ前に、対象動作、関係する人物・物体、目で確認できる証拠を定義します。
各クラスに観察可能な定義、正例、混同しやすい事例を用意します。物を拾うことと持つことを別クラスにするか、1つの行動の段階にするかを決めます。説明が似ているだけで統合しません。
出来事の位置を求めるモデルでは、開始・終了・中断条件を合意します。手が物に触れる時点、物が動き始める時点、動作が完了する時点は異なり得るため、同じ規約を通して使います。
行為者、関わる物体、それぞれの可視性を特定します。人物の役割と物体の役割を区別し、遮蔽、画面外への移動、複数人物の同時動作を相談します。
運用要件に合わせて人物、環境、カメラ角度、動作速度、照明を変えます。まず対象視点で動作が見えることを確認してから、その他の条件を広げます。
以下はクラス境界を説明する例であり、納品済みデータセットではありません。モデルに学習させたい違いに合わせて定義と例を置き換えてください。
| 行動の定義 | 必要な視覚的証拠 | 関連する負例・境界 |
|---|---|---|
| 物を拾う | 対象人物が物体に触れ、元の支えから移動させる | 指差し、別の人物の動作、既に持っている状態 |
| 後ろを振り返る | 指定人物の頭または体の回転を確認できる | 目だけの動き、別方向への回転、動作の遮蔽 |
| 物を手渡す | 渡す人、受け取る人、物の移動を順に特定できる | 見せるだけで渡さない、受け渡しが画面外で起こる |
| 背景・不明 | 行動がクラス定義外、または確認できない | すべての動画を最も近い既知クラスに押し込めない |
以下は出力構造の説明例です。顧客サンプルは含まず、特定動作が制作可能性の確認を通過したことも意味しません。
{
"clip_id": "illustrative_action_001",
"action": "pick_up_object",
"actor_id": "person_01",
"object_id": "object_01",
"start_seconds": 2.0,
"end_seconds": 4.1,
"visibility": "visible",
"label_schema_version": "draft_1"
}ボックス、キーポイント、フレームごとの追跡が必要なら、定義と座標規約をご提示ください。これらは別途合意する作業範囲であり、行動ラベルに空間ラベルが自動で含まれるわけではありません。
制作前に合格・不合格の基準を文書化し、タスク要件、レビュー基準、納品ラベルの意味を揃えます。
行為者、動作の流れ、関連する物体の変化を確認します。見た目が自然でも対象動作を完了しない動画は、合意した基準に従って修正または除外します。
似た行動と背景動作を明確に定義します。負例をすべて無関係な環境から集めると、モデルが動作ではなく環境を見分ける可能性があります。
出所、シナリオ群、関連バージョンを記録します。評価設計では同じ人物・シーン・近重複を考慮し、同じ動作列のわずかな変形が学習とテストをまたがないようにします。
合意したメディア一覧、ラベル辞書、区間または説明記録を提供します。サンプルの判断をルール版に結び付け、後続制作で関連する問題を探せるようにします。
まず1つの動作と混同しやすい代替動作でルールを試し、その後クラス一覧を広げられます。
具体的な動作と条件は、実現可能性の確認とサンプル検証が必要です。人物、物体、順序、タイミングを説明してください。行動名だけで出力を定義することは困難です。
動作の制約、利用可能な許諾済み素材、用途に照らして制作方法を相談します。合成動画には、出所の記録とタスクに関連する条件での検証が必要です。
クラス辞書、境界事例、出力形式をご提示ください。曖昧な定義、重複、不足クラスを特定し、小さなサンプルでラベルを揃えます。
必要な行動・人物・シーンの組み合わせと評価計画から決めます。案件で本数と制作範囲を確認しますが、本数だけでモデルへの効果を示すことはできません。
モデルのタスク、シナリオ、動画・ラベルの要件、希望納期をお知らせください。検証可能な案件サンプルをご相談いただけます。