Cloud Storage

Il connettore Google Cloud Storage ti consente di connetterti a Google Cloud Storage ed eseguire operazioni di trasferimento di file.

Prima di iniziare

Prima di utilizzare il connettore Cloud Storage, esegui le seguenti attività:

  • Nel tuo progetto Google Cloud:
    • Concedi il ruolo IAM roles/connectors.admin all'utente. configurazione del connettore.
    • Concedi i seguenti ruoli IAM all'account di servizio che vuoi utilizzare per il connettore:
      • roles/secretmanager.viewer
      • roles/secretmanager.secretAccessor
      • roles/storage.admin

      Un account di servizio è un tipo speciale di Account Google destinato a rappresentare una persona non umana utente che deve autenticarsi e avere l'autorizzazione ad accedere ai dati nelle API di Google. Se non hai un account di servizio, devi crearne uno. Per ulteriori informazioni le informazioni, vedi Creazione di un account di servizio.

    • Attiva i seguenti servizi:
      • secretmanager.googleapis.com (API Secret Manager)
      • connectors.googleapis.com (API Connectors)

      Per informazioni su come abilitare i servizi, vedi Attivazione dei servizi.

    Se questi servizi o autorizzazioni non sono stati abilitati in precedenza per il tuo progetto, ti viene chiesto di abilitarli durante la configurazione del connettore.

Configura il connettore

Per configurare il connettore è necessario creare una connessione al tuo origine dati (sistema di backend). Una connessione è specifica per un'origine dati. it significa che se hai molte origini dati, devi creare una connessione separata per ogni origine dati. Per creare una connessione:

  1. Nella console Cloud, vai a Connettori di integrazione > Pagina Connessioni e poi selezionare o creare un progetto Google Cloud.

    Vai alla pagina Connessioni .

  2. Fai clic su + CREA NUOVO per aprire la pagina Crea connessione.
  3. Nella sezione Posizione, scegli la località per la connessione.
    1. Regione: seleziona una località dall'elenco a discesa.

      Per l'elenco di tutte le aree geografiche supportate, consulta la sezione Località.

    2. Fai clic su AVANTI.
  4. Nella sezione Dettagli connessione, completa i seguenti passaggi:
      .
    1. Connettore: seleziona Cloud Storage dall'elenco a discesa dei connettori disponibili.
    2. Versione connettore: seleziona la versione del connettore dall'elenco a discesa delle versioni disponibili.
    3. Nel campo Nome connessione, inserisci un nome per l'istanza di connessione.

      I nomi delle connessioni devono soddisfare i seguenti criteri:

      • I nomi delle connessioni possono contenere lettere, numeri o trattini.
      • Le lettere devono essere minuscole.
      • I nomi delle connessioni devono iniziare con una lettera e terminare con una lettera o un numero.
      • I nomi delle connessioni non possono contenere più di 63 caratteri.
    4. Facoltativamente, inserisci una descrizione per l'istanza di connessione.
    5. Account di servizio: seleziona un account di servizio con i ruoli richiesti.
    6. Facoltativamente, configura le impostazioni del nodo di connessione:

      • Numero minimo di nodi: inserisci il numero minimo di nodi di connessione.
      • Numero massimo di nodi: inserisci il numero massimo di nodi di connessione.

      Un nodo è un'unità (o una replica) di una connessione che elabora le transazioni. Sono necessari più nodi per elaborare più transazioni per una connessione e, per elaborare meno transazioni. Per comprendere in che modo i nodi influiscono sui prezzi dei connettori, consulta Prezzi per i nodi di connessione. Se non inserisci alcun valore, per impostazione predefinita il numero minimo di nodi è impostato su 2 (per una migliore disponibilità) e il numero massimo di nodi è impostato su 50.

    7. ID progetto: l'ID del progetto Google Cloud in cui si trovano i dati.
    8. Facoltativamente, fai clic su + AGGIUNGI ETICHETTA per aggiungere un'etichetta alla connessione sotto forma di coppia chiave/valore.
    9. Fai clic su AVANTI.
  5. Verifica: controlla la connessione.
  6. Fai clic su Crea.

Entità, operazioni e azioni

Tutti i connettori di integrazione forniscono un livello di astrazione per gli oggetti l'applicazione connessa. Puoi accedere agli oggetti di un'applicazione solo tramite questa astrazione. L'astrazione ti viene esposta sotto forma di entità, operazioni e azioni.

  • Entità: un'entità può essere considerata un oggetto o un insieme di proprietà nel un'applicazione o un servizio connesso. La definizione di un'entità differisce da connettore di rete. Ad esempio, in un connettore di database, le tabelle sono le entità, connettore file server, le cartelle sono le entità e, in un connettore del sistema di messaggistica, le code sono le entità.

    Tuttavia, è possibile che un connettore non supporti o non disponga di entità. In questo caso, L'elenco Entities sarà vuoto.

  • Operazione: un'operazione è l'attività che è possibile eseguire su un'entità. Puoi eseguire una qualsiasi delle seguenti operazioni su un'entità:

    Selezionando un'entità dall'elenco disponibile, viene generato un elenco di le operazioni disponibili per l'entità. Per una descrizione dettagliata delle operazioni, consulta operazioni relative a entità. Tuttavia, se un connettore non supporta nessuna delle operazioni relative alle entità, ad esempio operazioni non sono elencate nell'elenco Operations.

  • Azione: un'azione è una funzione di prima classe resa disponibile per l'integrazione. attraverso l'interfaccia del connettore. Un'azione consente di apportare modifiche a una o più entità variano da connettore a connettore. Normalmente, un'azione ha alcuni parametri di input e un output . Tuttavia, è possibile che un connettore non supporta alcuna azione, nel qual caso l'elenco Actions sarà vuoto.

Limitazioni di sistema

Il connettore Google Cloud Storage può elaborare al massimo dieci transazioni al secondo. per nodo e limita le transazioni che superano questo limite. Per impostazione predefinita, Integration Connectors alloca due nodi (per una migliore disponibilità) per una connessione.

Per informazioni sui limiti applicabili a Integration Connectors, vedi Limiti.

Azioni

La connessione a Google Cloud Storage supporta le seguenti azioni:

Azione DownloadObject

La seguente tabella descrive i parametri di input dell'azione DownloadObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
Bucket Sì Stringa Nome del bucket in cui è presente l'oggetto da scaricare.
ObjectFilePath No Stringa Nome dell'oggetto che deve essere scaricato. Se non specificato, tutti verranno scaricati gli oggetti dal bucket specificato.

Se l'oggetto da scaricare è presente in una cartella secondaria di un bucket, è necessario che fornisce il percorso completo dell'oggetto. Ad esempio, per scaricare logfile.txt che è presente in folderA di bucket_01, il percorso dell'oggetto deve essere folderA/logfile.txt.

HasBytes No Booleano Indica se scaricare i contenuti come byte. I valori validi sono true o false. Se impostato su true, i contenuti vengono scaricati come stringa codificata in Base64.

Per impostazione predefinita, il campo HasBytes è impostato su false.
UpdatedEndDate No Data L'intervallo di date di fine in cui scaricare gli oggetti. Se non specificato, gli oggetti verrà scaricato dall'UpdatedStartDate specificato fino alla data odierna.
UpdatedStartDate No Data L'inizio dell'intervallo di date per scaricare gli oggetti. Se non specificato, gli oggetti verrà scaricato dall'inizio fino al giorno UpdatedEndDate.

Per esempi su come configurare l'azione DownloadObject, consulta gli esempi.

Azione UploadObject

La seguente tabella descrive i parametri di input dell'azione UploadObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
Bucket Sì Stringa Nome del bucket in cui verrà caricato l'oggetto.
FolderPath No Stringa Il percorso della cartella in cui deve essere caricato l'oggetto.
ContentBytes No Stringa Contenuti da caricare sotto forma di byte (stringa con codifica Base64).
HasBytes No Booleano Indica se caricare i contenuti come byte. Valori validi; true o false. Se impostato su true, i contenuti che vuoi caricare devono essere una stringa con codifica Base64.

Per impostazione predefinita, il campo HasBytes è impostato su false.
Contenuti Sì Stringa I contenuti da caricare.
ObjectName No Stringa Nome dell'oggetto che verrà caricato.

Per esempi su come configurare l'azione UploadObject, consulta gli esempi.

Azione CopyObject

La seguente tabella descrive i parametri di input dell'azione CopyObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
BucketSource Sì Stringa Nome del bucket da cui copiare l'oggetto.
ObjectSource Sì Stringa Percorso completo della cartella in cui vuoi copiare l'oggetto.
BucketDestination Sì Stringa Nome del bucket in cui copiare l'oggetto.
ObjectDestination No Stringa Percorso completo della destinazione, incluso il nome dell'oggetto. Se non specifichi qualsiasi nome dell'oggetto, viene conservato il nome dell'oggetto di origine.

Per esempi su come configurare l'azione CopyObject, consulta gli esempi.

Azione MoveObject

La seguente tabella descrive i parametri di input dell'azione MoveObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
BucketSource Sì Stringa Nome del bucket da cui spostare l'oggetto.
ObjectSource Sì Stringa Percorso completo della cartella in cui vuoi spostare l'oggetto.
BucketDestination Sì Stringa Nome del bucket in cui spostare l'oggetto.
ObjectDestination No Stringa Percorso completo della destinazione, incluso il nome dell'oggetto. Se non specifichi qualsiasi nome dell'oggetto, viene conservato il nome dell'oggetto di origine.

Azione DeleteObject

La seguente tabella descrive i parametri di input dell'azione DeleteObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
BucketSource Sì Stringa Il nome del bucket in cui è presente l'oggetto da eliminare.
ObjectSource Sì Stringa Nome dell'oggetto che vuoi eliminare.
Generazione No Doppio Versione dell'oggetto da eliminare. Se presente, elimina definitivamente la revisione specificata dell'oggetto rispetto all'ultima versione, che è il comportamento predefinito.
IfGenerationMatch No Doppio Rende l'operazione di eliminazione condizionale all'eventuale corrispondenza tra la generazione corrente dell'oggetto e quella specificata valore. Impostando questo valore su 0, l'operazione riesce solo se non sono presenti le versioni live dell'oggetto.
IfGenerationNotMatch No Doppio Rende l'operazione di eliminazione condizionale al fatto che la generazione corrente dell'oggetto non corrisponda alla un determinato valore. Se non esiste alcun oggetto attivo, la condizione preliminare non funziona. Impostando questo valore su 0 consente di completare l'operazione solo se è presente una versione live dell'oggetto.
IfMetagenerationMatch No Doppio Rende l'operazione di eliminazione condizionale all'eventuale metagenerazione attuale dell'oggetto corrisponde al valore specificato.
IfMetagenerationNotMatch No Doppio Rende l'operazione di eliminazione condizionale all'eventuale metagenerazione attuale dell'oggetto non corrisponde al valore specificato.

Azione SignURL

Nella tabella seguente vengono descritti i parametri di input dell'azione SignURL che crea un URL firmato per l'oggetto specificato.

Nome parametro Obbligatorio Tipo di dati Descrizione
Bucket Sì Stringa Il nome del bucket in cui si trova l'oggetto.
Oggetto Sì Stringa Il nome dell'oggetto per il quale generare il SignedURL.
RequestMethod No Stringa Il metodo che verrà utilizzato dalla richiesta firmata. Il valore predefinito è GET.
Località No Stringa Località del bucket specificato. Il valore predefinito è auto.
ActiveDateTime No Stringa La data e l'ora in cui SignedURL diventerà attivo. Se non specificato, verrà utilizzata la data corrente.
Query No Stringa La stringa di query da includere quando si utilizza SignedURL. Se non viene specificata, non verrà utilizzata alcuna stringa di query.
CustomHeaders No Stringa Un elenco separato da virgole di name=value delle intestazioni da utilizzare con SignedURL. Se non vengono specificate, vengono utilizzate le intestazioni personalizzate.
ExpiresIn Sì Stringa La data e l'ora di scadenza dell'URL SignedURL devono essere nel formato: 1d2h3m4s, il valore massimo è 7d0h0m0s.
HmacAccessKey No Stringa La chiave di accesso HMAC. Per informazioni, consulta la sezione Chiavi HMAC.
HmacSecret No Stringa Il secret HMAC.

Esempi

Gli esempi di questa sezione descrivono le seguenti operazioni:

  • Elenca tutti gli oggetti
  • Elenco di tutti gli oggetti in un bucket
  • Elenca tutti i bucket
  • Scaricare un oggetto
  • Scarica un oggetto binario
  • Carica un oggetto binario in un bucket
  • Carica un oggetto in un bucket
  • Carica un oggetto in una cartella
  • Copiare un oggetto
  • Spostare un oggetto
  • Elimina un oggetto
  • Creare un URL firmato per un oggetto

La tabella seguente elenca gli scenari di esempio e la configurazione corrispondente nell'attività Connettori:

Attività Configurazione
Elenca tutti gli oggetti
  1. Nella finestra di dialogo Configure connector task, fai clic su Entities.
  2. Seleziona l'entità Objects e poi l'operazione List.
  3. Fai clic su Fine.

Vengono elencati tutti gli oggetti in tutti i bucket. Gli oggetti sono elencati in il parametro di risposta connectorOutputPayload dell'attività Connectors.
Elenco di tutti gli oggetti in un bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Entities.
  2. Seleziona l'entità Objects e poi l'operazione List.
  3. Fai clic su Fine.
  4. Imposta filterClause sul nome del bucket da cui vuoi per elencare gli oggetti. Per impostare la clausola, nel Sezione Task Input dell'attività Connectors, fai clic su filterClause e inserisci Bucket = 'BUCKET_NAME' nel campo Valore predefinito. Ad esempio, Bucket = 'bucket_01'.
Elenca tutti i bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Entities.
  2. Seleziona l'entità Buckets e poi l'operazione List.
  3. Fai clic su Fine.
Scaricare un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione DownloadObject e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci un valore simile al seguente nella Campo Default Value: 
    {
  "Bucket": "bucket-test-01",
  "ObjectFilePath": "logfile.txt"
}

    4. In questo esempio viene scaricato il file logfile.txt. I contenuti del file scaricato sono disponibile in formato JSON nel parametro di risposta connectorOutputPayload dell'attività Connectors.
Scarica un oggetto binario

La procedura per scaricare un oggetto binario è la stessa utilizzata per scaricare un oggetto normale. descritti in precedenza. Inoltre, devi specificare HasBytes come true nel connectorInputPayload. L'oggetto viene scaricato come stringa codificata Base64. Valore di esempio per il campo connectorInputPayload:

{
"Bucket": "bucket-test-01",
"ObjectFilePath": "image01.png",
"HasBytes" : true
}

Se il download va a buon fine, l'output nel campo connectorOutputPayload sarà simile al seguente:

{
"Success": "true",
"ContentBytes": "SGVsbG8gdGVzdCE\u003d"
}
Carica un oggetto binario in un bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione UploadObject e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"ContentBytes": "SGVsbG8gVGVzdCE=",
"Bucket": "bucket-test-01",
"ObjectName" : "test-file-01",
"HasBytes": true
}

    4. Questo esempio crea il file test-file-01 nel bucket bucket-test-01. Se c'è un file esistente con il nome test-file-01, verrà sovrascritto.
Carica un oggetto in un bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione UploadObject e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"Content": "Hello test!",
"Bucket": "bucket-test-01",
"ObjectName" : "test-file-01.txt"
}

    4. In questo esempio viene creato il file test-file-01.txt con i contenuti Hello test! nel bucket bucket-test-01. Se c'è un file esistente con il nome test-file-01.txt, verrà sovrascritto.
Carica un oggetto in una cartella
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione UploadObject e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"Content": "Hello test!",
"Bucket": "bucket-test-01",
"FolderPath": "folderA",
"ObjectName": "test-file-01.txt"
}

    4. In questo esempio viene creato il file test-file-01.txt con i contenuti Hello test! nella cartella folderA di bucket-test-01. Se contiene un file esistente con il nome test-file-01.txt, questo verrà sovrascritto.
Copiare un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione CopyObject e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"BucketSource": "bucket_01",
"ObjectSource": "folderA/logfile.txt",
"BucketDestination": "bucket_02",
"ObjectDestination": "folderB/logfile.txt"
}

    4. Questo esempio copia il file folderA/logfile.txt da Da bucket_01 a folderB/logfile.txt in bucket_02.

Se la copia va a buon fine, l'output nel campo connectorOutputPayload sarà simile al seguente:

{
"Success": "true"
}
Spostare un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione MoveObject e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"BucketSource": "bucket_01",
"ObjectSource": "folderA/logfile.txt",
"BucketDestination": "bucket_02",
"ObjectDestination": "folderB/logfile.txt"
}

    4. Questo esempio sposta il file folderA/logfile.txt da Da bucket_01 a folderB/logfile.txt in bucket_02.

Se la copia va a buon fine, l'output nel campo connectorOutputPayload sarà simile al seguente:

{
"Success": "true"
}
Elimina un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione DeleteObject e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"BucketSource": "bucket_01",
"ObjectSource": "logfile.txt"
}

    4. Questo esempio elimina il file logfile.txt da bucket_01.

Se la copia va a buon fine, l'output nel campo connectorOutputPayload sarà simile al seguente:

{
"Success": "true"
}
Creare un URL firmato per un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione SignURL e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"Bucket": "bucket-test-01",
"ObjectName" : "test-file-01.txt"
}

    4. Questo esempio crea un URL firmato per il file test-file-01.txt che si trova nel bucket bucket-test-01. Se l'azione ha esito positivo, nella risposta riceverai l'URL firmato simile a a:

    {
"Success": "true",
"SignURL": "https://storage.googleapis.com/example-bucket/cat.jpeg?X-Goog-Algorithm=
GOOG4-RSA-SHA256&X-Goog-Credential=example%40example-project.iam.gserviceaccount
.com%2F20181026%2Fus-central1%2Fstorage%2Fgoog4_request&X-Goog-Date=20181026T18
1309Z&X-Goog-Expires=900&X-Goog-SignedHeaders=host&X-Goog-Signature=247a2aa45f16
9edf4d187d54e7cc46e4731b1e6273242c4f4c39a1d2507a0e58706e25e3a85a7dbb891d62afa849
6def8e260c1db863d9ace85ff0a184b894b117fe46d1225c82f2aa19efd52cf21d3e2022b3b868dc
c1aca2741951ed5bf3bb25a34f5e9316a2841e8ff4c530b22ceaa1c5ce09c7cbb5732631510c2058
0e61723f5594de3aea497f195456a2ff2bdd0d13bad47289d8611b6f9cfeef0c46c91a455b94e90a
66924f722292d21e24d31dcfb38ce0c0f353ffa5a9756fc2a9f2b40bc2113206a81e324fc4fd6823
a29163fa845c8ae7eca1fcf6e5bb48b3200983c56c5ca81fffb151cca7402beddfc4a76b13344703
2ea7abedc098d2eb14a7"
}

Considerazioni

  • Un oggetto scaricabile può avere una dimensione massima di 10 MB.
  • Non puoi caricare più file utilizzando l'azione UploadObject. Puoi caricare un solo file.

Utilizzare Terraform per creare connessioni

Puoi utilizzare il comando Terraform risorsa per creare una nuova connessione.

Per scoprire come applicare o rimuovere una configurazione Terraform, consulta: Comandi Terraform di base.

Per visualizzare un modello Terraform di esempio per la creazione di connessioni, vedi il modello di esempio.

Quando crei questa connessione utilizzando Terraform, devi impostare le seguenti variabili nel file di configurazione di Terraform:

Nome parametro Tipo di dati Obbligatorio Descrizione
project_id STRINGA Vero L'ID del progetto Google Cloud in cui si trovano i dati.

Utilizzare la connessione Cloud Storage in un'integrazione

Dopo aver creato la connessione, questa diventa disponibile in Apigee Integration e Application Integration. Puoi usare la connessione in un'integrazione tramite l'attività Connettori.

  • Per capire come creare e utilizzare l'attività Connectors in Apigee Integration, vedi Attività connettori.
  • Per capire come creare e utilizzare l'attività Connettori in Application Integration, vedi Attività connettori.

Ricevi assistenza dalla community Google Cloud

Puoi pubblicare le tue domande e discutere di questo connettore in Google Cloud community presso i forum Cloud.

Passaggi successivi