Cloud Storage

Il connettore Google Cloud Storage ti consente di connetterti a Google Cloud Storage ed eseguire operazioni di trasferimento di file.

Prima di iniziare

Prima di utilizzare il connettore Cloud Storage, esegui queste attività:

  • Nel tuo progetto Google Cloud:
    • Concedi il ruolo IAM roles/connectors.admin all'utente che configura il connettore.
    • Concedi i seguenti ruoli IAM all'account di servizio che vuoi utilizzare per il connettore:
      • roles/secretmanager.viewer
      • roles/secretmanager.secretAccessor
      • roles/storage.admin

      Un account di servizio è un tipo speciale di Account Google destinato a rappresentare un utente "non umano" che deve autenticarsi ed essere autorizzato ad accedere ai dati nelle API di Google. Se non hai un account di servizio, devi crearne uno. Per saperne di più, consulta la pagina sulla creazione di un account di servizio.

    • Abilita i seguenti servizi:
      • secretmanager.googleapis.com (API Secret Manager)
      • connectors.googleapis.com (API Connectors)

      Per informazioni su come abilitare i servizi, vedi Abilitazione dei servizi.

    Se questi servizi o queste autorizzazioni non sono stati abilitati per il tuo progetto in precedenza, ti verrà chiesto di abilitarli durante la configurazione del connettore.

Configura il connettore

Per configurare il connettore è necessario creare una connessione all'origine dati (sistema di backend). Una connessione è specifica per un'origine dati. Ciò significa che se disponi di molte origini dati, devi creare una connessione separata per ciascuna. Per creare una connessione, segui questi passaggi:

  1. Nella console Cloud, vai alla pagina Connettori di integrazione > Connessioni, quindi seleziona o crea un progetto Google Cloud.

    Vai alla pagina Connessioni

  2. Fai clic su + CREA NUOVO per aprire la pagina Crea connessione.
  3. Nella sezione Posizione, scegli la località per la connessione.
    1. Regione: seleziona una località dall'elenco a discesa.

      Per l'elenco di tutte le regioni supportate, vedi Località.

    2. Fai clic su AVANTI.
  4. Nella sezione Dettagli connessione, completa quanto segue:
    1. Connettore: seleziona Cloud Storage dall'elenco a discesa dei connettori disponibili.
    2. Versione connettore: seleziona la versione del connettore dall'elenco a discesa delle versioni disponibili.
    3. Nel campo Nome connessione, inserisci un nome per l'istanza di connessione.

      I nomi delle connessioni devono soddisfare i seguenti criteri:

      • I nomi delle connessioni possono contenere lettere, numeri o trattini.
      • Le lettere devono essere minuscole.
      • I nomi delle connessioni devono iniziare con una lettera e terminare con una lettera o un numero.
      • I nomi delle connessioni non possono superare i 63 caratteri.
    4. (Facoltativo) Inserisci una descrizione per l'istanza di connessione.
    5. Account di servizio: seleziona un account di servizio con i ruoli richiesti.
    6. Facoltativamente, configura le impostazioni del nodo di connessione:

      • Numero minimo di nodi: inserisci il numero minimo di nodi di connessione.
      • Numero massimo di nodi: inserisci il numero massimo di nodi di connessione.

      Un nodo è un'unità (o una replica) di una connessione che elabora le transazioni. Sono necessari più nodi per elaborare più transazioni per una connessione e, al contrario, sono necessari meno nodi per elaborare un numero minore di transazioni. Per capire in che modo i nodi influiscono sui prezzi del connettore, consulta Prezzi dei nodi di connessione. Se non inserisci alcun valore, per impostazione predefinita il numero minimo di nodi è impostato su 2 (per una migliore disponibilità) e il numero massimo di nodi è impostato su 50.

    7. ID progetto: l'ID del progetto Google Cloud in cui si trovano i dati.
    8. Facoltativamente, fai clic su + AGGIUNGI ETICHETTA per aggiungere un'etichetta alla connessione sotto forma di coppia chiave-valore.
    9. Fai clic su AVANTI.
  5. Controllo: controlla la connessione.
  6. Fai clic su Crea.

Entità, operazioni e azioni

Tutti i connettori di integrazione forniscono un livello di astrazione per gli oggetti dell'applicazione connessa. Puoi accedere agli oggetti di un'applicazione solo tramite questa astrazione. L'astrazione è esposta come entità, operazioni e azioni.

  • Entità: un'entità può essere considerata come un oggetto o una raccolta di proprietà nell'applicazione o nel servizio collegato. La definizione di un'entità è diversa da un connettore a un connettore. Ad esempio, in un connettore di database, le tabelle sono le entità, in un connettore di file server, le cartelle sono le entità e in un connettore di sistema di messaggistica le code sono le entità.

    Tuttavia, è possibile che un connettore non supporti o non abbia entità, nel qual caso l'elenco Entities sarà vuoto.

  • Operazione : un'operazione è l'attività che puoi eseguire su un'entità. Su un'entità puoi eseguire una qualsiasi delle seguenti operazioni:

    Se selezioni un'entità dall'elenco disponibile, viene generato un elenco di operazioni disponibili per l'entità. Per una descrizione dettagliata delle operazioni, consulta le operazioni delle entità dell'attività Connettori. Tuttavia, se un connettore non supporta nessuna delle operazioni delle entità, queste operazioni non supportate non sono elencate nell'elenco Operations.

  • Azione: un'azione è una funzione di prima classe resa disponibile per l'integrazione attraverso l'interfaccia del connettore. Un'azione consente di apportare modifiche a una o più entità e di variare da connettore a connettore. Tuttavia, è possibile che un connettore non supporti alcuna azione, nel qual caso l'elenco Actions sarà vuoto.

Limitazioni di sistema

Il connettore Google Cloud Storage può elaborare un massimo di 10 transazioni al secondo per nodo e limitare qualsiasi transazione oltre questo limite. Per impostazione predefinita, Integration Connectors alloca 2 nodi (per una migliore disponibilità) per una connessione.

Per informazioni sui limiti applicabili a Integration Connectors, consulta Limiti.

Azioni

La connessione a Google Cloud Storage supporta le seguenti azioni:

Azione DownloadObject

La tabella seguente descrive i parametri di input dell'azione DownloadObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
Bucket Stringa Nome del bucket in cui è presente l'oggetto da scaricare.
ObjectFilePath No Stringa Nome dell'oggetto da scaricare. Se non specificato, verranno scaricati tutti gli oggetti del bucket specificato.

Se l'oggetto da scaricare è presente in una cartella secondaria di un bucket, devi fornire il percorso completo dell'oggetto. Ad esempio, per scaricare logfile.txt presente nel file folderA di bucket_01, il percorso dell'oggetto deve essere folderA/logfile.txt.

HasBytes No Booleano Indica se scaricare i contenuti come byte. I valori validi sono true o false. Se il criterio viene impostato su true, i contenuti vengono scaricati come stringa codificata in Base64.

Per impostazione predefinita, il campo HasBytes è impostato su false.

UpdatedEndDate No Data L'intervallo di date di fine in cui scaricare gli oggetti. Se non specificato, gli oggetti verranno scaricati dal UpdatedStartDate specificato fino a oggi.
UpdatedStartDate No Data L'inizio dell'intervallo di date in cui scaricare gli oggetti. Se non specificato, gli oggetti verranno scaricati dall'inizio dell'orario fino al UpdatedEndDate.

Per esempi su come configurare l'azione DownloadObject, consulta la sezione Esempi.

Azione UploadObject

La tabella seguente descrive i parametri di input dell'azione UploadObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
Bucket Stringa Nome del bucket in cui verrà caricato l'oggetto.
FolderPath No Stringa Il percorso della cartella in cui deve essere caricato l'oggetto.
ContentBytes No Stringa Contenuti da caricare sotto forma di byte (stringa codificata Base64).
HasBytes No Booleano Se caricare i contenuti come byte. Valori validi: true o false. Se il criterio viene impostato su true, i contenuti che vuoi caricare devono essere una stringa codificata in Base64.

Per impostazione predefinita, il campo HasBytes è impostato su false.

Contenuti Stringa I contenuti da caricare.
ObjectName No Stringa Nome dell'oggetto che verrà caricato.

Per esempi su come configurare l'azione UploadObject, consulta la sezione Esempi.

Azione CopyObject

La tabella seguente descrive i parametri di input dell'azione CopyObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
BucketSource Stringa Nome del bucket da cui vuoi copiare l'oggetto.
ObjectSource Stringa Percorso completo della cartella in cui vuoi copiare l'oggetto.
BucketDestination Stringa Nome del bucket in cui copiare l'oggetto.
ObjectDestination No Stringa Percorso completo della destinazione, incluso il nome dell'oggetto. Se non specifichi alcun nome dell'oggetto, viene conservato il nome dell'oggetto di origine.

Per esempi su come configurare l'azione CopyObject, consulta la sezione Esempi.

Azione MoveObject

La tabella seguente descrive i parametri di input dell'azione MoveObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
BucketSource Stringa Nome del bucket da cui vuoi spostare l'oggetto.
ObjectSource Stringa Percorso completo della cartella in cui vuoi spostare l'oggetto.
BucketDestination Stringa Nome del bucket in cui vuoi spostare l'oggetto.
ObjectDestination No Stringa Percorso completo della destinazione, incluso il nome dell'oggetto. Se non specifichi alcun nome dell'oggetto, viene conservato il nome dell'oggetto di origine.

Azione DeleteObject

La tabella seguente descrive i parametri di input dell'azione DeleteObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
BucketSource Stringa Nome del bucket in cui è presente l'oggetto da eliminare.
ObjectSource Stringa Il nome dell'oggetto che vuoi eliminare.
Generazione No Doppio Versione dell'oggetto da eliminare. Se presente, elimina definitivamente la revisione specificata dell'oggetto anziché la versione più recente, che è il comportamento predefinito.
IfGenerationMatch No Doppio Rende l'operazione di eliminazione condizionale alla condizione che l'attuale generazione dell'oggetto corrisponda al valore specificato. Se questo valore viene impostato su 0, l'operazione viene completata solo se non esistono versioni attive dell'oggetto.
IfGenerationNotMatch No Doppio Rende l'operazione di eliminazione condizionale alla mancata corrispondenza tra la generazione attuale dell'oggetto e il valore specificato. Se non esiste alcun oggetto attivo, la condizione preliminare non funziona. L'impostazione di questo valore su 0 consente la riuscita dell'operazione solo se esiste una versione live dell'oggetto.
IfMetagenerationMatch No Doppio Rende l'operazione di eliminazione vincolata alla corrispondenza tra la metagenerazione attuale dell'oggetto e il valore specificato.
IfMetagenerationNotMatch No Doppio Rende l'operazione di eliminazione condizionale alla mancata corrispondenza tra la metagenerazione attuale dell'oggetto e il valore specificato.

Azione SignURL

La seguente tabella descrive i parametri di input dell'azione SignURL che crea un URL firmato per l'oggetto specificato.

Nome parametro Obbligatorio Tipo di dati Descrizione
Bucket Stringa Il nome del bucket in cui si trova l'oggetto.
Oggetto Stringa Il nome dell'oggetto per cui generare SignedURL.
RequestMethod No Stringa Il metodo utilizzato dalla richiesta firmata. Il valore predefinito è GET.
Località No Stringa Posizione del bucket specificato. Il valore predefinito è auto.
ActiveDateTime No Stringa La data e l'ora in cui SignedURL diventerà attivo. Se non specificato, verrà utilizzato il valore dateTime corrente.
Query No Stringa La stringa di query che deve essere inclusa quando si utilizza l'URL SignedURL. Se non specificata, non verrà utilizzata alcuna stringa di query.
CustomHeaders No Stringa Un elenco separato da virgole di nome=valore delle intestazioni da utilizzare con SignedURL, se non specificato non verrà utilizzato intestazioni personalizzate.
ExpiresIn Stringa La scadenza per l'URL SignedURL deve essere nel formato 1d2h3m4s; il valore massimo è 7d0h0m0s.
HmacAccessKey No Stringa La chiave di accesso HMAC. Per informazioni, consulta la sezione Chiavi HMAC.
HmacSecret No Stringa Il secret HMAC.

Esempi

Gli esempi di questa sezione descrivono le seguenti operazioni:

  • Elenco di tutti gli oggetti
  • Elenco di tutti gli oggetti in un bucket
  • Elenco di tutti i bucket
  • Scaricare un oggetto
  • scarica un oggetto binario
  • Carica un oggetto in un bucket
  • Caricare un oggetto in una cartella
  • Copiare un oggetto
  • Spostare un oggetto
  • Elimina un oggetto
  • Creare un URL firmato per un oggetto

Nella tabella seguente sono elencati gli scenari di esempio e la configurazione corrispondente nell'attività Connettori:

Attività Configurazione
Elenco di tutti gli oggetti
  1. Nella finestra di dialogo Configure connector task, fai clic su Entities.
  2. Seleziona l'entità Objects, quindi l'operazione List.
  3. Fai clic su Fine.

In questo modo vengono elencati tutti gli oggetti in tutti i bucket. Gli oggetti sono elencati nel parametro di risposta connectorOutputPayload dell'attività Connectors.

Elenco di tutti gli oggetti in un bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Entities.
  2. Seleziona l'entità Objects, quindi l'operazione List.
  3. Fai clic su Fine.
  4. Imposta filterClause sul nome del bucket da cui vuoi elencare gli oggetti. Per impostare la clausola, nella sezione Task Input dell'attività Connectors fai clic su filterClause, quindi inserisci Bucket = 'BUCKET_NAME' nel campo Valore predefinito. Ad esempio, Bucket = 'bucket_01'.
Elenco di tutti i bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Entities.
  2. Seleziona l'entità Buckets, quindi l'operazione List.
  3. Fai clic su Fine.
Scaricare un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione DownloadObject, quindi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload e inserisci un valore simile al seguente nel campo Default Value:
    
    {
      "Bucket": "bucket-test-01",
      "ObjectFilePath": "logfile.txt"
    }
  4. Questo esempio scarica il file logfile.txt. I contenuti del file scaricato sono disponibili in formato JSON nel parametro di risposta connectorOutputPayload dell'attività Connectors.

scarica un oggetto binario

I passaggi per scaricare un oggetto binario sono gli stessi del download di un oggetto normale come descritto in precedenza. Inoltre, devi specificare HasBytes come true nel campo connectorInputPayload. In questo modo viene scaricato l'oggetto come stringa codificata Base64. Valore di esempio per il campo connectorInputPayload:


{
"Bucket": "bucket-test-01",
"ObjectFilePath": "image01.png",
"HasBytes" : true
}

Se il download va a buon fine, l'output nel campo connectorOutputPayload sarà simile al seguente:


{
"Success": "true",
"ContentBytes": "SGVsbG8gdGVzdCE\u003d"
}
Carica un oggetto in un bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione UploadObject, quindi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload e inserisci quanto segue nel campo Default Value:
    
    {
    "Content": "Hello test!",
    "Bucket": "bucket-test-01",
    "ObjectName" : "test-file-01.txt"
    }
  4. Questo esempio crea il file test-file-01.txt con il contenuto Hello test! nel bucket bucket-test-01. Se esiste già un file con il nome test-file-01.txt, questo verrà sovrascritto.

Caricare un oggetto in una cartella
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione UploadObject, quindi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload e inserisci quanto segue nel campo Default Value:
    
    {
    "Content": "Hello test!",
    "Bucket": "bucket-test-01",
    "ObjectName" : "folderA/test-file-01.txt"
    }
  4. In questo esempio viene creato il file test-file-01.txt con i contenuti Hello test! nella cartella folderA di bucket-test-01. Se la cartella contiene già un file con il nome test-file-01.txt, verrà sovrascritta.

Copiare un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione CopyObject, quindi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload e inserisci quanto segue nel campo Default Value:
    
    {
    "BucketSource": "bucket_01",
    "ObjectSource": "folderA/logfile.txt",
    "BucketDestination": "bucket_02",
    "ObjectDestination": "folderB/logfile.txt"
    }
  4. Questo esempio copia il file folderA/logfile.txt da bucket_01 a folderB/logfile.txt in bucket_02.

Se la copia ha esito positivo, l'output nel campo connectorOutputPayload sarà simile al seguente:


{
"Success": "true"
}
Spostare un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione MoveObject, quindi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload e inserisci quanto segue nel campo Default Value:
    
    {
    "BucketSource": "bucket_01",
    "ObjectSource": "folderA/logfile.txt",
    "BucketDestination": "bucket_02",
    "ObjectDestination": "folderB/logfile.txt"
    }
  4. Questo esempio sposta il file folderA/logfile.txt da bucket_01 a folderB/logfile.txt in bucket_02.

Se la copia ha esito positivo, l'output nel campo connectorOutputPayload sarà simile al seguente:


{
"Success": "true"
}
Elimina un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione DeleteObject, quindi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload e inserisci quanto segue nel campo Default Value:
    
    {
    "BucketSource": "bucket_01",
    "ObjectSource": "logfile.txt"
    }
  4. Questo esempio elimina il file logfile.txt da bucket_01.

Se la copia ha esito positivo, l'output nel campo connectorOutputPayload sarà simile al seguente:


{
"Success": "true"
}
Creare un URL firmato per un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione SignURL, quindi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload e inserisci quanto segue nel campo Default Value:
    
    {
    "Bucket": "bucket-test-01",
    "ObjectName" : "test-file-01.txt"
    }
  4. In questo esempio viene creato un URL firmato per il file test-file-01.txt che si trova nel bucket bucket-test-01. Se l'azione va a buon fine, riceverai l'URL firmato nella risposta simile alla seguente:

    
    {
    "Success": "true",
    "SignURL": "https://storage.googleapis.com/example-bucket/cat.jpeg?X-Goog-Algorithm=
    GOOG4-RSA-SHA256&X-Goog-Credential=example%40example-project.iam.gserviceaccount
    .com%2F20181026%2Fus-central1%2Fstorage%2Fgoog4_request&X-Goog-Date=20181026T18
    1309Z&X-Goog-Expires=900&X-Goog-SignedHeaders=host&X-Goog-Signature=247a2aa45f16
    9edf4d187d54e7cc46e4731b1e6273242c4f4c39a1d2507a0e58706e25e3a85a7dbb891d62afa849
    6def8e260c1db863d9ace85ff0a184b894b117fe46d1225c82f2aa19efd52cf21d3e2022b3b868dc
    c1aca2741951ed5bf3bb25a34f5e9316a2841e8ff4c530b22ceaa1c5ce09c7cbb5732631510c2058
    0e61723f5594de3aea497f195456a2ff2bdd0d13bad47289d8611b6f9cfeef0c46c91a455b94e90a
    66924f722292d21e24d31dcfb38ce0c0f353ffa5a9756fc2a9f2b40bc2113206a81e324fc4fd6823
    a29163fa845c8ae7eca1fcf6e5bb48b3200983c56c5ca81fffb151cca7402beddfc4a76b13344703
    2ea7abedc098d2eb14a7"
    }

Considerazioni

  • Un oggetto scaricabile può avere una dimensione massima di 10 MB.
  • Non puoi caricare più file utilizzando l'azione UploadObject. Puoi caricare un solo file.

Utilizzare Terraform per creare connessioni

Puoi utilizzare la risorsa Terraform per creare una nuova connessione.

Per scoprire come applicare o rimuovere una configurazione Terraform, consulta Comandi Terraform di base.

Per visualizzare un modello Terraform di esempio per la creazione delle connessioni, guarda il modello di esempio.

Quando crei questa connessione utilizzando Terraform, devi impostare le seguenti variabili nel file di configurazione Terraform:

Nome parametro Tipo di dati Obbligatorio Descrizione
project_id STRING True L'ID del progetto Google Cloud in cui si trovano i dati.

Utilizza la connessione Cloud Storage in un'integrazione

Dopo aver creato la connessione, diventa disponibile sia in Apigee Integration che in Application Integration. Puoi usare la connessione in un'integrazione tramite l'attività Connettori.

  • Per capire come creare e utilizzare l'attività Connettori in Apigee Integration, consulta Attività Connettori.
  • Per capire come creare e utilizzare l'attività Connettori in Application Integration, consulta Attività Connettori.

Ricevi assistenza dalla community Google Cloud

Puoi pubblicare le tue domande e discutere di questo connettore nella community Google Cloud sui forum Cloud.

Passaggi successivi