Demo ini menunjukkan cara membuat penyematan multimodal dengan meneruskan input multimodal, seperti teks dan gambar ke model penyematan, dengan menggunakan Vertex AI SDK untuk ABAP.
Sebelum memulai
Sebelum menjalankan demo ini, pastikan Anda atau administrator Anda telah memenuhi prasyarat berikut:
- Mengaktifkan Vertex AI API di project Google Cloud Anda.
- Siapkan autentikasi untuk mengakses Vertex AI API.
- Mengonfigurasi parameter pembuatan model. Untuk membuat penyematan, hanya parameter berikut yang diperlukan:
Client Key,Model Key,Model ID,Google Cloud Region Location, danPublisher.
Membuat embedding multimodal
Untuk membuat penyematan multimodal, lakukan langkah-langkah berikut:
Di SAP GUI, jalankan kode transaksi
/GOOG/SDK_IMG.Atau, jalankan kode transaksi
SPRO, lalu klik IMG Referensi SAP.Buka ABAP SDK untuk Google Cloud > Demo.
Buka Demo: Memanggil model Embed multimodal
Pilih Buat embeddings multimodal.
Di kolom Kunci klien, masukkan kunci klien untuk autentikasi.
Di kolom Model key, masukkan kunci model, yang dikonfigurasi di parameter pembuatan model.
Di kolom Dimensions, masukkan jumlah dimensi untuk penyematan output, seperti
1408. Untuk penyematan multimodal, dimensi yang tersedia adalah:128,256,512, dan1408.Tentukan nilai untuk kolom berikut sebagaimana mestinya:
- URI GCS gambar: Untuk menambahkan gambar ke permintaan Anda, tentukan URI gambar yang disimpan di bucket Cloud Storage.
- Upload gambar: Untuk menambahkan gambar ke permintaan Anda, upload gambar dari sistem lokal.
- GCS URI video: Untuk menambahkan video ke permintaan Anda, tentukan URI video yang disimpan di bucket Cloud Storage.
Anda dapat menentukan URI file dari Cloud Storage atau mengupload file dari sistem lokal.
Di kolom Masukkan teks, berikan teks input Anda.
Jalankan program. Area Respons dari LLM menampilkan penyematan yang dihasilkan.