Ringkasan Warehouse Vision

Vision Warehouse adalah API yang memungkinkan developer mengintegrasikan penyimpanan dan penelusuran berbasis AI untuk konten media yang tidak terstruktur (video streaming, gambar, dan video batch) ke dalam alat dan aplikasi yang ada.

Vision Warehouse adalah komponen utama Vertex AI Vision. Repositori ini berfungsi sebagai repositori penyimpanan dan menyediakan kemampuan penelusuran lanjutan untuk beberapa jenis data dan kasus penggunaan. Secara khusus:

  • Streaming video: Anda dapat mengimpor streaming video live dan data analisis video live menggunakan aplikasi platform Vertex AI Vision atau Vision Warehouse API, dan menelusuri gambar menggunakan Vision Warehouse API atau konsol Google Cloud.
  • Gambar: Anda dapat mengimpor gambar dan metadata menggunakan Vision Warehouse API, menganalisis gambar menggunakan Vision Warehouse API, dan menelusuri gambar menggunakan Vision Warehouse API atau konsol Google Cloud.
  • Video batch: Anda dapat mengimpor video batch dan metadata menggunakan Vision Warehouse API, menganalisis video batch menggunakan Vision Warehouse API, dan menelusuri video batch menggunakan Vision Warehouse API atau konsol Google Cloud.

Ringkasan resource API

Diagram resource API

Resource Storage API

Korpus: Penampung yang menyimpan aset media dari jenis tertentu. Anda dapat membuat beberapa korpus untuk mengatur berbagai jenis aset media.

Aset: Objek media yang disimpan dalam korpus. Aset dapat berupa gambar, video batch, atau streaming video. Korpus biasanya berisi banyak aset dari jenis yang sama. Anda dapat menentukan anotasi yang terkait dengan aset. Aset juga dapat dikelompokkan ke dalam koleksi untuk pengelolaan.

Koleksi: Resource dalam korpus yang berfungsi sebagai penampung referensi ke aset.

Anotasi: Metadata atau data yang disediakan pengguna yang berasal dari Vertex AI Vision yang dikaitkan dengan aset. Aset dapat memiliki beberapa anotasi.

  • Contoh 1: Tentukan anotasi teks bernama "video-title" untuk aset video batch.
  • Contoh 2: Menyimpan data yang dianalisis dari model Vertex AI Vision sebagai anotasi. Misalnya, label pengenalan objek dalam jangka waktu video yang berbeda dapat disimpan sebagai anotasi.

Skema data: Menentukan cara anotasi ditafsirkan dalam korpus. Skema data menentukan satu jenis anotasi dan strategi penelusurannya. Setiap anotasi harus dikaitkan dengan skema data.

Resource Search API

Indeks (tersedia untuk vertical gambar dan video batch): Resource tingkat korpus yang merupakan representasi terkelola dari aset dan anotasi yang dianalisis. Indeks dapat dilihat sebagai set data vektor penyematan dan batasan semantik yang mewakili makna konten media. Indeks dapat di-deploy ke endpoint indeks untuk penelusuran.

Endpoint indeks (tersedia untuk vertikal gambar dan video batch): Lingkungan terkelola yang menayangkan indeks Vision Warehouse. Endpoint indeks menyediakan satu titik akses untuk mengirim permintaan penelusuran.

Konfigurasi Penelusuran: Menyimpan berbagai properti yang memengaruhi perilaku penelusuran dan hasil penelusuran.

  • Properti faset (tersedia untuk vertikal video streaming): Membuat konfigurasi untuk mengaktifkan hasil penelusuran histogram berbasis faset.
  • Properti kriteria penelusuran (tersedia untuk vertikal video streaming dan video batch): Membuat pemetaan antara kriteria penelusuran kustom dan satu atau beberapa kunci skema data.

Hipernim Penelusuran: Jenis konfigurasi penelusuran tertentu yang memungkinkan Anda menyesuaikan kemampuan layanan penelusuran untuk mengenali hipernim kata. Misalnya, pengguna dapat menentukan "hewan" sebagai hipernim dari "kucing" dan "anjing". Penelusuran "animal" juga akan menampilkan hasil dengan "cat" dan "dog" dalam data indeks.

Bahasa yang didukung

Batch Video Warehouse dan Image Warehouse mendukung bahasa berikut untuk penelusuran semantik:

  • Inggris
  • Spanyol
  • Portugis
  • Prancis
  • Jepang
  • China

Streaming Warehouse tidak memiliki batasan bahasa.

Langkah berikutnya