In dieser Demonstration erfahren Sie, wie Sie multimodale Inhalte generieren, indem Sie mit dem Vertex AI SDK für ABAP multimodale Eingaben, z. B. Text und ein Bild, an ein Gemini-Modell übergeben.
Hinweise
Bevor Sie diese Demo ausführen, müssen Sie oder Ihre Administratoren die folgenden Voraussetzungen erfüllt haben:
- Sie haben die Vertex AI API in Ihrem Google Cloud-Projekt aktiviert.
- Richten Sie die Authentifizierung für den Zugriff auf die Vertex AI API ein.
- Konfigurierte Parameter zur Modellgenerierung
Multimodale Inhalte generieren
So generieren Sie multimodale Inhalte:
Führen Sie in der SAP-GUI den Transaktionscode
/GOOG/SDK_IMG
aus.Alternativ können Sie den Transaktionscode
SPRO
ausführen und dann auf SAP-Referenz-IMG klicken.Gehen Sie zu ABAP SDK for Google Cloud > Demos.
Öffnen Sie Vertex AI SDK: Demo: Text- und multimodale Gemini-Modelle aufrufen.
Wählen Sie Multimodale Inhalte generieren aus.
Geben Sie im Feld Clientschlüssel den Clientschlüssel für die Authentifizierung ein.
Geben Sie im Feld Modellschlüssel den Modellschlüssel ein, der in den Parametern für die Modellgenerierung konfiguriert ist.
Geben Sie je nach Bedarf Werte für die folgenden Felder an:
- MIME-Typ: Geben Sie den IANA-Standard-MIME-Typ der Quelldaten an.
Der Standardwert ist
application/pdf
. - GCS-URI der Datei: Wenn Sie Ihrer Anfrage ein Bild oder ein anderes Medium hinzufügen möchten, geben Sie den URI der relevanten, in einem Cloud Storage-Bucket gespeicherten Datei an.
- Medien hochladen: Wenn Sie Ihrer Anfrage ein Bild oder ein anderes Medium hinzufügen möchten, laden Sie die Datei von Ihrem lokalen System hoch.
Sie können entweder den URI einer in einem Cloud Storage-Bucket gespeicherten Datei angeben, oder eine Datei von Ihrem lokalen System hochladen.
- MIME-Typ: Geben Sie den IANA-Standard-MIME-Typ der Quelldaten an.
Der Standardwert ist
Geben Sie im Feld Systemanweisungen eingeben Systemanweisungen ein.
Geben Sie im Feld Prompt eingeben Ihren Prompt ein.
Starten Sie das Programm. Im Bereich Antwort vom LLM werden die generierten multimodalen Inhalte angezeigt.