人間行動データ

人間の行動認識に合わせた動画データ

行動認識データでは、対象動作を似た動きや日常の背景動作と区別できることが大切です。VWU.AIは、サンプル段階で動作定義、シーン変化、案件別ラベルを合意し、人間行動動画を制作します。

行動一覧、想定カメラ視点、評価計画をお持ちください。動画ラベル、行動区間、人物の役割、人物と物体の相互作用を、1つの制作要件として相談できます。

行動名を観察可能なラベル基準に変える

似た行動名でも、ラベルのルールは異なる場合があります。動画単位か時間区間かを選ぶ前に、対象動作、関係する人物・物体、目で確認できる証拠を定義します。

01

行動分類

各クラスに観察可能な定義、正例、混同しやすい事例を用意します。物を拾うことと持つことを別クラスにするか、1つの行動の段階にするかを決めます。説明が似ているだけで統合しません。

02

行動の時間位置特定

出来事の位置を求めるモデルでは、開始・終了・中断条件を合意します。手が物に触れる時点、物が動き始める時点、動作が完了する時点は異なり得るため、同じ規約を通して使います。

03

人物と物体の相互作用

行為者、関わる物体、それぞれの可視性を特定します。人物の役割と物体の役割を区別し、遮蔽、画面外への移動、複数人物の同時動作を相談します。

04

シーンの変化

運用要件に合わせて人物、環境、カメラ角度、動作速度、照明を変えます。まず対象視点で動作が見えることを確認してから、その他の条件を広げます。

行動定義の要件書例

以下はクラス境界を説明する例であり、納品済みデータセットではありません。モデルに学習させたい違いに合わせて定義と例を置き換えてください。

行動の定義必要な視覚的証拠関連する負例・境界
物を拾う対象人物が物体に触れ、元の支えから移動させる指差し、別の人物の動作、既に持っている状態
後ろを振り返る指定人物の頭または体の回転を確認できる目だけの動き、別方向への回転、動作の遮蔽
物を手渡す渡す人、受け取る人、物の移動を順に特定できる見せるだけで渡さない、受け渡しが画面外で起こる
背景・不明行動がクラス定義外、または確認できないすべての動画を最も近い既知クラスに押し込めない

役割と時間で記録を整理する

以下は出力構造の説明例です。顧客サンプルは含まず、特定動作が制作可能性の確認を通過したことも意味しません。

{
  "clip_id": "illustrative_action_001",
  "action": "pick_up_object",
  "actor_id": "person_01",
  "object_id": "object_01",
  "start_seconds": 2.0,
  "end_seconds": 4.1,
  "visibility": "visible",
  "label_schema_version": "draft_1"
}

ボックス、キーポイント、フレームごとの追跡が必要なら、定義と座標規約をご提示ください。これらは別途合意する作業範囲であり、行動ラベルに空間ラベルが自動で含まれるわけではありません。

認識タスクに照らしてデータを確認する

制作前に合格・不合格の基準を文書化し、タスク要件、レビュー基準、納品ラベルの意味を揃えます。

01

対象動作が実際に起きるかを確認

行為者、動作の流れ、関連する物体の変化を確認します。見た目が自然でも対象動作を完了しない動画は、合意した基準に従って修正または除外します。

02

負例の目的を明確にする

似た行動と背景動作を明確に定義します。負例をすべて無関係な環境から集めると、モデルが動作ではなく環境を見分ける可能性があります。

03

グループと類似動画を確認

出所、シナリオ群、関連バージョンを記録します。評価設計では同じ人物・シーン・近重複を考慮し、同じ動作列のわずかな変形が学習とテストをまたがないようにします。

04

納品の追跡可能性を保つ

合意したメディア一覧、ラベル辞書、区間または説明記録を提供します。サンプルの判断をルール版に結び付け、後続制作で関連する問題を探せるようにします。

行動分類を広げる前に確認すること

まず1つの動作と混同しやすい代替動作でルールを試し、その後クラス一覧を広げられます。

01

依頼した行動は何でも制作できますか?

具体的な動作と条件は、実現可能性の確認とサンプル検証が必要です。人物、物体、順序、タイミングを説明してください。行動名だけで出力を定義することは困難です。

02

実写と合成動画のどちらを使うべきですか?

動作の制約、利用可能な許諾済み素材、用途に照らして制作方法を相談します。合成動画には、出所の記録とタスクに関連する条件での検証が必要です。

03

既存のクラス辞書は使えますか?

クラス辞書、境界事例、出力形式をご提示ください。曖昧な定義、重複、不足クラスを特定し、小さなサンプルでラベルを揃えます。

04

本数はどう決めますか?

必要な行動・人物・シーンの組み合わせと評価計画から決めます。案件で本数と制作範囲を確認しますが、本数だけでモデルへの効果を示すことはできません。

モデルに見分けさせたい行動を定義しましょう

モデルのタスク、シナリオ、動画・ラベルの要件、希望納期をお知らせください。検証可能な案件サンプルをご相談いただけます。