Ikhtisar Pekerjaan Pelabelan Bingkai Video

Gunakan halaman ini untuk mempelajari tentang pekerjaan pelabelan bingkai video deteksi objek dan pelacakan objek. Informasi di halaman ini berlaku untuk kedua jenis tugas bawaan ini.

Pekerjaan pelabelan bingkai video unik karena hal-hal berikut:

• Anda dapat menyediakan objek data yang siap untuk dianotasi (bingkai video), atau Anda dapat menyediakan file video dan memiliki Ground Truth secara otomatis mengekstrak bingkai video.

• Pekerja memiliki kemampuan untuk menghemat pekerjaan saat mereka pergi.

• Anda tidak dapat menggunakan Amazon Mechanical Turk tenaga kerja untuk menyelesaikan tugas pelabelan Anda.

• Ground Truth menyediakan UI pekerja, serta alat bantu dan pelabelan dasar, untuk membantu pekerja menyelesaikan tugas Anda. Anda tidak perlu menyediakan template tugas pekerja.

Gunakan topik berikut untuk mempelajari lebih lanjut.

Masukan Data

Pekerjaan pelabelan bingkai video menggunakan urutan bingkai video. Urutan tunggal adalah serangkaian gambar yang telah diekstraksi dari satu video. Anda dapat memberikan urutan bingkai video Anda sendiri, atau meminta Ground Truth secara otomatis mengekstrak urutan bingkai video dari file video Anda. Untuk mempelajari selengkapnya, lihat Menyediakan File Video.

Ground Truth menggunakan file urutan untuk mengidentifikasi semua gambar dalam satu urutan. Semua urutan yang ingin Anda sertakan dalam satu pekerjaan pelabelan diidentifikasi dalam file manifes input. Setiap urutan digunakan untuk membuat tugas pekerja tunggal. Anda dapat secara otomatis membuat file urutan dan file manifes input menggunakan pengaturan data otomatis Ground Truth. Untuk mempelajari selengkapnya, lihat Pengaturan Data Input Bingkai Video Otomatis.

Untuk mempelajari cara membuat file urutan dan file manifes masukan secara manual, lihatBuat File Manifes Masukan Bingkai Video.

Waktu Penyelesaian Job

Pekerjaan pelabelan bingkai video dan video dapat memakan waktu berjam-jam untuk diselesaikan oleh pekerja. Anda dapat mengatur jumlah total waktu pekerja dapat mengerjakan setiap tugas saat Anda membuat pekerjaan pelabelan. Waktu maksimum yang dapat Anda atur bagi pekerja untuk mengerjakan tugas adalah 7 hari. Nilai defaultnya adalah 3 hari.

Kami sangat menyarankan Anda membuat tugas yang dapat diselesaikan pekerja dalam waktu 12 jam. Pekerja harus menjaga UI pekerja tetap terbuka saat mengerjakan tugas. Mereka dapat menghemat pekerjaan saat mereka pergi dan Ground Truth menyimpan pekerjaan mereka setiap 15 menit.

Saat menggunakan operasi SageMaker CreateLabelingJob API, atur total waktu tugas tersedia bagi pekerja dalam TaskTimeLimitInSeconds parameterHumanTaskConfig.

Saat membuat pekerjaan pelabelan di konsol, Anda dapat menentukan batas waktu ini saat memilih jenis tenaga kerja dan tim kerja Anda.

Jenis Tugas

Saat Anda membuat pelacakan objek video atau pekerjaan pelabelan deteksi objek video, Anda menentukan jenis anotasi yang ingin dibuat pekerja saat mengerjakan tugas pelabelan Anda. Jenis anotasi menentukan jenis data keluaran yang dikembalikan Ground Truth dan mendefinisikan tipe tugas untuk pekerjaan pelabelan Anda.

Jika Anda membuat pekerjaan pelabelan menggunakan operasi API CreateLabelingJob, Anda menentukan jenis tugas menggunakan parameter annotationType file konfigurasi kategori label. Untuk mempelajari selengkapnya, lihat Buat File Konfigurasi Kategori Pelabelan dengan Kategori Label dan Atribut Bingkai.

Jenis tugas berikut tersedia untuk pekerjaan pelacakan objek video atau pelabelan deteksi objek video:

• Kotak pembatas - Pekerja dilengkapi dengan alat untuk membuat anotasi kotak pembatas. Kotak pembatas adalah kotak yang digambar pekerja di sekitar objek untuk mengidentifikasi lokasi piksel dan label objek itu dalam bingkai.

• Polyline — Pekerja dilengkapi dengan alat untuk membuat anotasi polyline. Polyline didefinisikan oleh deret koordinat x, y yang diurutkan. Setiap titik yang ditambahkan ke polyline terhubung ke titik sebelumnya dengan garis. Polyline tidak harus ditutup (titik awal dan titik akhir tidak harus sama) dan tidak ada batasan pada sudut yang terbentuk di antara garis.

• Polygon — Pekerja dilengkapi dengan alat untuk membuat anotasi poligon. Poligon adalah bentuk tertutup yang ditentukan oleh serangkaian koordinat x, y yang terurut. Setiap titik yang ditambahkan ke poligon dihubungkan ke titik sebelumnya dengan garis dan tidak ada batasan pada sudut yang terbentuk di antara garis. Dua garis (sisi) poligon tidak dapat bersilangan. Titik awal dan akhir poligon harus sama.

• Keypoint — Pekerja disediakan dengan alat untuk membuat anotasi keypoint. Keypoint adalah titik tunggal yang terkait dengan koordinat x, y dalam bingkai video.

Tenaga Kerja

Saat membuat pekerjaan pelabelan bingkai video, Anda perlu menentukan tim kerja untuk menyelesaikan tugas anotasi Anda. Anda dapat memilih tim kerja dari tenaga kerja pribadi pekerja Anda sendiri, atau dari tenaga kerja vendor yang Anda pilih di. AWS Marketplace Anda tidak dapat menggunakan tenaga kerja Amazon Mechanical Turk untuk pekerjaan pelabelan bingkai video.

Untuk mempelajari lebih lanjut tentang tenaga kerja vendor, lihatMengelola Tenaga Kerja Vendor.

Untuk mempelajari cara membuat dan mengelola tenaga kerja pribadi, lihatGunakan Tenaga Kerja Pribadi.

Antarmuka Pengguna Pekerja (UI)

Ground Truth menyediakan antarmuka pengguna pekerja (UI), alat, dan fitur pelabelan bantu untuk membantu pekerja menyelesaikan tugas pelabelan video Anda. Anda dapat melihat pratinjau UI pekerja saat membuat pekerjaan pelabelan di konsol.

Saat membuat job pelabelan menggunakan operasi APICreateLabelingJob, Anda harus menyediakan ARN yang disediakan oleh Ground Truth dalam HumanTaskUiArnparameter untuk menentukan UI pekerja untuk tipe tugas Anda. Anda dapat menggunakan HumanTaskUiArn operasi SageMaker RenderUiTemplateAPI untuk melihat pratinjau UI pekerja.

Anda memberikan instruksi pekerja, label, dan opsional, atribut yang dapat digunakan pekerja untuk memberikan informasi lebih lanjut tentang label dan bingkai video. Atribut ini disebut sebagai atribut kategori label dan atribut bingkai masing-masing. Semuanya ditampilkan di UI pekerja.

Kategori Label dan Atribut Bingkai

Saat Anda membuat pelacakan objek video atau pekerjaan pelabelan deteksi objek video, Anda dapat menambahkan satu atau beberapa atribut kategori label dan atribut bingkai:

• Atribut kategori label - Daftar opsi (string), kotak teks formulir bebas, atau bidang numerik yang terkait dengan satu atau beberapa label. Ini digunakan oleh pekerja untuk memberikan metadata tentang label.

• Atribut bingkai — Daftar opsi (string), kotak teks formulir bebas, atau bidang numerik yang muncul di setiap bingkai video yang dikirim oleh pekerja untuk membuat anotasi. Ini digunakan oleh pekerja untuk menyediakan metadata tentang bingkai video.

Selain itu, Anda dapat menggunakan atribut label dan bingkai agar pekerja memverifikasi label dalam pekerjaan verifikasi label bingkai video.

Gunakan bagian berikut untuk mempelajari lebih lanjut tentang atribut ini. Untuk mempelajari cara menambahkan kategori label dan atribut bingkai ke pekerjaan pelabelan, gunakan bagian Create Labeling Job pada halaman tipe tugas pilihan Anda.

Atribut Kategori Label

Tambahkan atribut kategori label ke label untuk memberi pekerja kemampuan untuk memberikan informasi lebih lanjut tentang anotasi yang mereka buat. Atribut kategori label ditambahkan ke label individual, atau ke semua label. Ketika atribut kategori label diterapkan ke semua label itu disebut sebagai atribut kategori label global.

Misalnya, jika Anda menambahkan kategori label mobil, Anda mungkin juga ingin menangkap data tambahan tentang mobil berlabel Anda, seperti jika mereka tersumbat atau ukuran mobil. Anda dapat menangkap metadata ini menggunakan atribut kategori label. Dalam contoh ini, jika Anda menambahkan atribut yang tersumbat ke kategori label mobil, Anda dapat menetapkan sebagian, sepenuhnya, tidak ke atribut yang tersumbat dan memungkinkan pekerja untuk memilih salah satu opsi ini.

Saat membuat pekerjaan verifikasi label, tambahkan atribut kategori label ke setiap label yang ingin diverifikasi oleh pekerja.

Atribut tingkat bingkai

Tambahkan atribut bingkai untuk memberi pekerja kemampuan untuk memberikan informasi lebih lanjut tentang frame video individual. Setiap atribut frame yang Anda tambahkan muncul di semua frame.

Misalnya, Anda dapat menambahkan atribut number-frame agar pekerja mengidentifikasi jumlah objek yang mereka lihat dalam bingkai tertentu.

Dalam contoh lain, Anda mungkin ingin memberikan kotak teks bentuk bebas untuk memberi pekerja kemampuan untuk memberikan jawaban atas pertanyaan.

Saat membuat pekerjaan verifikasi label, Anda dapat menambahkan satu atau beberapa atribut bingkai untuk meminta pekerja memberikan umpan balik pada semua label dalam bingkai video.

Instruksi Pekerja

Anda dapat memberikan instruksi pekerja untuk membantu pekerja Anda menyelesaikan tugas pelabelan bingkai video Anda. Anda mungkin ingin membahas topik-topik berikut saat menulis instruksi Anda:

• Praktik terbaik dan hal-hal yang harus dihindari saat membuat anotasi objek.

• Atribut kategori label yang disediakan (untuk tugas deteksi objek dan pelacakan objek) dan cara menggunakannya.

• Cara menghemat waktu saat memberi label dengan menggunakan pintasan keyboard.

Anda dapat menambahkan instruksi pekerja menggunakan SageMaker konsol sambil membuat pekerjaan pelabelan. Jika Anda membuat pekerjaan pelabelan menggunakan operasi APICreateLabelingJob, Anda menentukan instruksi pekerja dalam file konfigurasi kategori label Anda.

Selain instruksi Anda, Ground Truth menyediakan tautan untuk membantu pekerja menavigasi dan menggunakan portal pekerja. Lihat instruksi ini dengan memilih jenis tugas padaInstruksi Pekerja.

Tugas Menurun

Pekerja dapat menolak tugas.

Pekerja menolak tugas jika instruksi tidak jelas, data input tidak ditampilkan dengan benar, atau jika mereka mengalami masalah lain dengan tugas tersebut. Jika jumlah pekerja per objek dataset (NumberOfHumanWorkersPerDataObject) menolak tugas, objek data ditandai sebagai kedaluwarsa dan tidak akan dikirim ke pekerja tambahan.

Persyaratan Izin Job Frame Video

Saat membuat pekerjaan pelabelan bingkai video, selain persyaratan izin yang ditemukan diTetapkan IAM Izin untuk Menggunakan Ground Truth, Anda harus menambahkan kebijakan CORS ke bucket S3 yang berisi file manifes masukan.

Tambahkan Kebijakan Izin CORS ke S3 Bucket

Saat Anda membuat pekerjaan pelabelan bingkai video, Anda menentukan bucket di S3 tempat data input dan file manifes Anda berada dan di mana data keluaran Anda akan disimpan. Ember ini mungkin sama. Anda harus melampirkan kebijakan Cross-origin resource sharing (CORS) berikut ke bucket input dan output Anda. Jika Anda menggunakan konsol Amazon S3 untuk menambahkan kebijakan ke bucket, Anda harus menggunakan format JSON.

JSON

[
    {
        "AllowedHeaders": [
            "*"
        ],
        "AllowedMethods": [
            "GET",
            "HEAD",
            "PUT"
        ],
        "AllowedOrigins": [
            "*"
        ],
        "ExposeHeaders": [
            "Access-Control-Allow-Origin"
        ],
        "MaxAgeSeconds": 3000
    }
]

XML-XM

<?xml version="1.0" encoding="UTF-8"?>
<CORSConfiguration xmlns="http://s3.amazonaws.com/doc/2006-03-01/">
<CORSRule>
    <AllowedOrigin>*</AllowedOrigin>
    <AllowedMethod>GET</AllowedMethod>
    <AllowedMethod>HEAD</AllowedMethod>
    <AllowedMethod>PUT</AllowedMethod>
    <MaxAgeSeconds>3000</MaxAgeSeconds>
    <ExposeHeader>Access-Control-Allow-Origin</ExposeHeader>
    <AllowedHeader>*</AllowedHeader>
</CORSRule>
</CORSConfiguration>

Untuk mempelajari cara menambahkan kebijakan CORS ke bucket S3, lihat Bagaimana cara menambahkan berbagi sumber daya lintas domain dengan CORS? di Panduan Pengguna Layanan Penyimpanan Sederhana Amazon.