Video Intelligence API dapat mengidentifikasi entity yang ditampilkan dalam rekaman video menggunakan fitur LABEL_DETECTION dan menganotasi entity tersebut dengan label (tag). Fitur ini mengidentifikasi objek, lokasi, aktivitas, spesies hewan, produk, dan lainnya.
Deteksi label berbeda dengan Pelacakan objek. Tidak seperti pelacakan objek, deteksi label menyediakan label untuk seluruh frame (tanpa kotak pembatas).
Misalnya, untuk video kereta di persimpangan, Video Intelligence API menampilkan label seperti "kereta", "transportasi", "perlintasan kereta api", dan sebagainya. Setiap label menyertakan segmen waktu dengan offset waktu (stempel waktu) untuk kemunculan entitas dari awal video. Setiap anotasi juga berisi informasi tambahan, termasuk ID entity yang dapat Anda gunakan untuk menemukan informasi selengkapnya tentang entity tersebut di Search API Pustaka Pengetahuan Google.
Setiap entity yang ditampilkan juga dapat menyertakan entity kategori
terkait di kolom categoryEntities. Misalnya, label entitas
"Terrier" memiliki kategori "Dog". Entitas kategori memiliki
hierarki. Misalnya, kategori "" adalah turunan dari kategori "Mamalia"
dalam hierarki. Untuk daftar entity kategori umum yang digunakan Video Intelligence, lihat entry-level-category.json.
Analisis dapat dikelompokkan sebagai berikut:
- Tingkat segmen:
Segmen video yang dipilih pengguna dapat ditentukan untuk analisis dengan menetapkan stempel waktu awal dan akhir untuk tujuan anotasi (lihat VideoSegment). Entitas kemudian diidentifikasi dan diberi label dalam setiap segmen. Jika tidak ada segmen yang ditentukan, seluruh video akan diperlakukan sebagai satu segmen. - Level pengambilan gambar:
Pengambilan gambar (juga dikenal sebagai adegan) otomatis terdeteksi di dalam setiap segmen (atau video). Selanjutnya, entity akan diidentifikasi dan diberi label dalam setiap scene. Untuk mengetahui detailnya, lihat Deteksi pergantian shot - Level frame:
Entitas diidentifikasi dan diberi label dalam setiap frame (dengan pengambilan sampel satu frame per detik).
Untuk mendeteksi label dalam video, panggil metode
annotate
dan tentukan
LABEL_DETECTION
di kolom features.
Lihat Menganalisis Video untuk Label dan Tutorial Deteksi Label.
Visualizer Video Intelligence API
Lihat Visualizer Video Intelligence API untuk melihat cara kerja fitur ini.