動画フレームオブジェクト追跡を使用して動画フレーム内のオブジェクトを追跡する

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

動画フレームオブジェクト追跡のタスクタイプを使用すると、境界ボックス、ポリライン、ポリゴン、または特徴点注釈ツールを使用して、ワーカーに一連の動画フレーム（動画から抽出された画像）内のオブジェクトの動きを追跡させることができます。選択したツールで、作成する動画フレームのタスクタイプを定義します。例えば、境界ボックス動画フレームオブジェクト追跡タスクタイプを使用して、車、自転車、歩行者などのオブジェクトの周囲にボックスを描画し、その動きを追跡するようにワーカーに指示できます。

カテゴリのリストを指定すると、ワーカーが動画フレームに追加する各注釈は、インスタンス ID を使用して、そのカテゴリのインスタンスとして特定されます。例えば、ラベルカテゴリ car を指定した場合、ワーカーが注釈を付ける最初の車はインスタンス ID car:1 になります。ワーカーが注釈を付ける 2 番目の車には、インスタンス ID car: 2 が指定されます。オブジェクトの動きを追跡するため、ワーカーはすべてのフレームのオブジェクトの周囲に、同じインスタンス ID と関連付けられた注釈を追加します。

Amazon SageMaker AI Ground Truth コンソール、SageMaker API、言語固有の AWS SDKs を使用して、動画フレームオブジェクト追跡ラベル付けジョブを作成できます。詳細については、「動画フレームオブジェクト検出のラベル付けジョブを作成する」を参照して、任意の方法を選択してください。ラベル付けジョブを作成する際に選択できる注釈ツールの詳細については、「タスクタイプ」を参照してください。

Ground Truth は、ラベル付けジョブタスクを完了するためのワーカー UI とツールを提供します (ワーカー UI をプレビューする)。

動画オブジェクト検出調整タスクタイプを使用して、動画オブジェクト検出ラベル付けジョブで作成された注釈の調整を行うジョブを作成できます。詳細については、「動画フレームオブジェクト検出の調整または検証ラベル付けジョブを作成する」を参照してください。

ワーカー UI をプレビューする

Ground Truth は、ワーカーに動画フレームオブジェクトの追跡注釈タスクを実行するためのウェブユーザーインターフェイス (UI) を提供します。コンソールでラベル付けジョブを作成するときに、ワーカー UI のプレビューと操作ができます。新規ユーザーの場合は、コンソールで小さな入力データセットを使用してラベル付けジョブを作成し、ワーカー UI をプレビューし、動画フレーム、ラベル、ラベルの属性が想定どおりに表示されることを確認することをお勧めします。

UI には、オブジェクト追跡タスクを完了するためにワーカーが使用できる次の補助ラベル付けツールがあります。

次の動画では、ワーカーが境界ボックスツールでワーカー UI を使用してオブジェクト追跡タスクを実行する方法を紹介しています。

動画フレームオブジェクト追跡のラベル付けジョブを作成する

SageMaker AI コンソールまたは CreateLabelingJob API オペレーションを使用して、動画フレームオブジェクト追跡ラベル付けジョブを作成できます。

このセクションは、「動画フレームラベル付けジョブリファレンス」を確認済みであることと、使用する入力データと入力データセット接続のタイプを選択済みであることを前提としています。

ラベル付けジョブの作成 (コンソール)

「」の手順に従って、SageMaker AI コンソールで動画フレームオブジェクト追跡ジョブを作成する方法ラベル付けジョブの作成 (コンソール)を確認できます。ステップ 10 で、[Task category] (タスクカテゴリ) ドロップダウンリストから[Video - Object tracking] (動画 - オブジェクト追跡) を選択します。[Task selection] (タスク選択) でいずれかのカードを選択して、目的のタスクタイプを選択します。

ラベル付けジョブを作成 (API)

SageMaker API オペレーション CreateLabelingJob を使用して、オブジェクト追跡ラベル付けジョブを作成します。この API は、すべての AWS SDK に対してこのオペレーションを定義します。このオペレーションでサポートされている言語固有の SDK のリストを確認するには、CreateLabelingJob の「以下の資料も参照してください」セクションを確認してください。

「ラベル付けジョブを作成 (API)」では、CreateLabelingJob オペレーションの概要を説明しています。リクエストを設定する際には、それらの指示に従ったうえで、以下のことを実行してください。

以下は、米国東部 (バージニア北部) リージョンでラベル付けジョブを作成する AWS Python SDK (Boto3) リクエストの例です。

response = client.create_labeling_job(
    LabelingJobName='example-video-ot-labeling-job,
    LabelAttributeName='label',
    InputConfig={
        'DataSource': {
            'S3DataSource': {
                'ManifestS3Uri': 's3://amzn-s3-demo-bucket/path/video-frame-sequence-input-manifest.json'
            }
        },
        'DataAttributes': {
            'ContentClassifiers': [
                'FreeOfPersonallyIdentifiableInformation'|'FreeOfAdultContent',
            ]
        }
    },
    OutputConfig={
        'S3OutputPath': 's3://amzn-s3-demo-bucket/prefix/file-to-store-output-data',
        'KmsKeyId': 'string'
    },
    RoleArn='arn:aws:iam::*:role/*,
    LabelCategoryConfigS3Uri='s3://bucket/prefix/label-categories.json',
    StoppingConditions={
        'MaxHumanLabeledObjectCount': 123,
        'MaxPercentageOfInputDatasetLabeled': 123
    },
    HumanTaskConfig={
        'WorkteamArn': 'arn:aws:sagemaker:us-east-1:*:workteam/private-crowd/*',
        'UiConfig': {
            'HumanTaskUiArn: 'arn:aws:sagemaker:us-east-1:394669845002:human-task-ui/VideoObjectTracking'
        },
        'PreHumanTaskLambdaArn': 'arn:aws:lambda:us-east-1:432418664414:function:PRE-VideoObjectTracking',
        'TaskKeywords': [
            'Video Frame Object Tracking,
        ],
        'TaskTitle': 'Video frame object tracking task',
        'TaskDescription': Tracking the location of objects and people across video frames',
        'NumberOfHumanWorkersPerDataObject': 123,
        'TaskTimeLimitInSeconds': 123,
        'TaskAvailabilityLifetimeInSeconds': 123,
        'MaxConcurrentTaskCount': 123,
        'AnnotationConsolidationConfig': {
            'AnnotationConsolidationLambdaArn': 'arn:aws:lambda:us-east-1:432418664414:function:ACS-VideoObjectTracking'
        },
    Tags=[
        {
            'Key': 'string',
            'Value': 'string'
        },
    ]
)

動画フレームオブジェクト追跡の調整または検証ラベル付けジョブを作成する

Ground Truth コンソールまたは CreateLabelingJob API を使用して、調整とラベル検証ラベル付けのジョブを作成できます。調整と検証のラベル付けジョブの詳細と作成方法については、「ラベルの検証と調整」を参照してください。

出力データ形式

動画フレームオブジェクト追跡のラベル付けジョブを作成すると、タスクはワーカーに送信されます。タスクを受け取ったワーカーがタスクを完了すると、ラベル付けジョブの作成時に指定した Amazon S3 の出力場所にラベルが書き込まれます。動画フレームオブジェクト追跡の出力データ形式については、「動画フレームオブジェクト追跡の出力」を参照してください。Ground Truth を初めて使用する場合は、 出力データ形式の詳細について「ラベル付けジョブの出力データ」を参照してください。