Cloud Storage

Il connettore Google Cloud Storage ti consente di connetterti a un contenitore Google Cloud Storage ed eseguire operazioni di trasferimento di file.

Prima di iniziare

Prima di utilizzare il connettore Cloud Storage, esegui le seguenti attività:

  • Nel tuo progetto Google Cloud:
    • Concedi il ruolo IAM roles/connectors.admin all'utente. configurazione del connettore.
    • Concedi i seguenti ruoli IAM all'account di servizio che vuoi utilizzare per il connettore:
      • roles/secretmanager.viewer
      • roles/secretmanager.secretAccessor
      • roles/storage.admin

      Un account di servizio è un tipo speciale di Account Google destinato a rappresentare un utente "non umano" che deve eseguire l'autenticazione ed essere autorizzato ad accedere ai dati nelle API Google. Se non hai un account di servizio, devi crearne uno. Per maggiori informazioni le informazioni, vedi Creazione di un account di servizio.

    • Attiva i seguenti servizi:
      • secretmanager.googleapis.com (API Secret Manager)
      • connectors.googleapis.com (API Connectors)

      Per informazioni su come attivare i servizi, consulta Abilitazione dei servizi.

    Se questi servizi o autorizzazioni non sono stati attivati in precedenza per il tuo progetto, ti verrà chiesto di attivarli durante la configurazione del connettore.

Configura il connettore

Per configurare il connettore è necessario creare una connessione al tuo origine dati (sistema di backend). Una connessione è specifica per un'origine dati. Ciò significa che se hai molte origini dati, devi creare una connessione distinta per ciascuna. Per creare una connessione:

  1. Nella console Cloud, vai a Connettori di integrazione > Pagina Connessioni e poi selezionare o creare un progetto Google Cloud.

    Vai alla pagina Connessioni

  2. Fai clic su + CREA NUOVO per aprire la pagina Crea connessione.
  3. Nella sezione Posizione, scegli la località per la connessione.
    1. Regione: seleziona una località dall'elenco a discesa.

      Per l'elenco di tutte le aree geografiche supportate, consulta la sezione Località.

    2. Fai clic su AVANTI.
  4. Nella sezione Dettagli connessione, completa quanto segue:
    1. Connettore: seleziona Cloud Storage dall'elenco a discesa dei connettori disponibili.
    2. Versione del connettore: seleziona la versione del connettore dall'elenco a discesa delle versioni disponibili.
    3. Nel campo Nome connessione, inserisci un nome per l'istanza di connessione.

      I nomi delle connessioni devono soddisfare i seguenti criteri:

      • I nomi delle connessioni possono contenere lettere, numeri o trattini.
      • Le lettere devono essere minuscole.
      • I nomi delle connessioni devono iniziare con una lettera e terminare con una lettera o un numero.
      • I nomi delle connessioni non possono contenere più di 49 caratteri.
    4. Facoltativamente, inserisci una descrizione per l'istanza di connessione.
    5. Se vuoi, attiva Cloud Logging e poi seleziona un livello di log. Per impostazione predefinita, il livello di log è impostato su Error.
    6. Account di servizio: seleziona un account di servizio con i ruoli richiesti.
    7. (Facoltativo) Configura le impostazioni del nodo di connessione:

      • Numero minimo di nodi: inserisci il numero minimo di nodi di connessione.
      • Numero massimo di nodi: inserisci il numero massimo di nodi di connessione.

      Un nodo è un'unità (o una replica) di una connessione che elabora le transazioni. Sono necessari più nodi per elaborare più transazioni per una connessione e, per elaborare meno transazioni. Per comprendere in che modo i nodi influiscono sui prezzi dei connettori, consulta Prezzi per i nodi di connessione. Se non inserisci alcun valore, per impostazione predefinita il numero minimo di nodi è impostato su 2 (per una maggiore disponibilità) e il numero massimo di nodi è impostato su 50.

    8. ID progetto: l'ID del progetto Google Cloud in cui si trovano i dati.
    9. Se vuoi, fai clic su + AGGIUNGI ETIQUETTA per aggiungere un'etichetta alla connessione sotto forma di coppia chiave/valore.
    10. Fai clic su AVANTI.
  5. Esamina: controlla la connessione.
  6. Fai clic su Crea.

Entità, operazioni e azioni

Tutti gli Integration Connectors forniscono un livello di astrazione per gli oggetti dell'applicazione collegata. Puoi accedere agli oggetti di un'applicazione solo tramite questa astrazione. L'astrazione ti viene esposta sotto forma di entità, operazioni e azioni.

  • Entità: un'entità può essere considerata un oggetto o un insieme di proprietà nel un'applicazione o un servizio connesso. La definizione di un'entità differisce da un connettore di rete. Ad esempio, in un connettore di database le tabelle sono le entità, in un connettore di file server le cartelle sono le entità e in un connettore di sistema di messaggistica le code sono le entità.

    Tuttavia, è possibile che un connettore non supporti o non abbia entità, nel qual caso l'elenco Entities sarà vuoto.

  • Operazione: un'operazione è l'attività che puoi eseguire su un'entità. Puoi eseguire su un'entità una delle seguenti operazioni:

    La selezione di un'entità dall'elenco disponibile genera un elenco di operazioni disponibili per l'entità. Per una descrizione dettagliata delle operazioni, consulta operazioni relative a entità. Tuttavia, se un connettore non supporta nessuna delle operazioni relative all'entità, come quelle non supportate operazioni non sono elencate nell'elenco Operations.

  • Azione: un'azione è una funzione di prima classe resa disponibile per l'integrazione. attraverso l'interfaccia del connettore. Un'azione ti consente di apportare modifiche a una o più entità e varia da un connettore all'altro. In genere, un'azione avrà alcuni parametri di input e un parametro di output. Tuttavia, è possibile che un connettore non supporta alcuna azione, nel qual caso l'elenco Actions sarà vuoto.

Limitazioni del sistema

Il connettore Google Cloud Storage può elaborare un massimo di 10 transazioni al secondo per nodo e limita le transazioni che superano questo limite. Per impostazione predefinita, Integration Connectors alloca 2 nodi (per una maggiore disponibilità) per una connessione.

Per informazioni sui limiti applicabili a Integration Connectors, vedi Limiti.

Azioni

La connessione a Google Cloud Storage supporta le seguenti azioni:

Azione DownloadObject

La tabella seguente descrive i parametri di input dell'azione DownloadObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
Bucket Sì Stringa Nome del bucket in cui è presente l'oggetto da scaricare.
ObjectFilePath No Stringa Nome dell'oggetto da scaricare. Se non specificato, tutti i valori verranno scaricati gli oggetti dal bucket specificato.

Se l'oggetto da scaricare è presente in una cartella secondaria di un bucket, è necessario che fornisce il percorso completo dell'oggetto. Ad esempio, per scaricare logfile.txt presente in folderA di bucket_01, il percorso dell'oggetto deve essere folderA/logfile.txt.

HasBytes No Booleano Indica se scaricare i contenuti come byte. I valori validi sono true o false. Se impostato su true, i contenuti vengono scaricati come stringa codificata Base64.

Per impostazione predefinita, il campo HasBytes è impostato su false.
UpdatedEndDate No Data L'intervallo di date di fine per il download degli oggetti. Se non specificato, gli oggetti verranno scaricati dal UpdatedStartDate specificato fino al giorno corrente.
UpdatedStartDate No Data L'inizio dell'intervallo di date per scaricare gli oggetti. Se non specificato, gli oggetti verranno scaricati dall'inizio del periodo fino al giorno UpdatedEndDate.

Per esempi su come configurare l'azione DownloadObject, consulta Esempi.

Azione UploadObject

La tabella seguente descrive i parametri di input dell'azione UploadObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
Bucket Sì Stringa Nome del bucket in cui verrà caricato l'oggetto.
FolderPath No Stringa Il percorso della cartella in cui deve essere caricato l'oggetto.
ContentBytes No Stringa Contenuti da caricare sotto forma di byte (stringa con codifica Base64).
HasBytes No Booleano Indica se caricare i contenuti come byte. Valori validi: true o false. Se impostato su true, i contenuti che vuoi caricare devono essere una stringa con codifica Base64.

Per impostazione predefinita, il campo HasBytes è impostato su false.
Contenuti Sì Stringa I contenuti da caricare.
ObjectName No Stringa Nome dell'oggetto che verrà caricato.

Per esempi su come configurare l'azione UploadObject, consulta Esempi.

Azione CopyObject

La tabella seguente descrive i parametri di input dell'azione CopyObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
BucketSource Sì Stringa Nome del bucket da cui vuoi copiare l'oggetto.
ObjectSource Sì Stringa Percorso completo della cartella in cui vuoi copiare l'oggetto.
BucketDestination Sì Stringa Nome del bucket in cui copiare l'oggetto.
ObjectDestination No Stringa Percorso completo della destinazione, incluso il nome dell'oggetto. Se non specifichi qualsiasi nome dell'oggetto, viene conservato il nome dell'oggetto di origine.

Per esempi su come configurare l'azione CopyObject, consulta gli esempi.

Azione MoveObject

La seguente tabella descrive i parametri di input dell'azione MoveObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
BucketSource Sì Stringa Nome del bucket da cui vuoi spostare l'oggetto.
ObjectSource Sì Stringa Percorso completo della cartella in cui vuoi spostare l'oggetto.
BucketDestination Sì Stringa Nome del bucket in cui vuoi spostare l'oggetto.
ObjectDestination No Stringa Percorso completo della destinazione, incluso il nome dell'oggetto. Se non specifichi alcun nome dell'oggetto, viene mantenuto il nome dell'oggetto di origine.

Azione DeleteObject

La seguente tabella descrive i parametri di input dell'azione DeleteObject.

Nome parametro Obbligatorio Tipo di dati Descrizione
BucketSource Sì Stringa Nome del bucket in cui è presente l'oggetto da eliminare.
ObjectSource Sì Stringa Nome dell'oggetto che vuoi eliminare.
Generazione No Doppio Versione dell'oggetto da eliminare. Se presente, elimina definitivamente la revisione specificata dell'oggetto anziché la versione più recente, che è il comportamento predefinito.
IfGenerationMatch No Doppio Rende l'operazione di eliminazione condizionale all'eventuale corrispondenza tra la generazione corrente dell'oggetto e quella specificata valore. Impostando questo valore su 0, l'operazione riesce solo se non sono presenti le versioni live dell'oggetto.
IfGenerationNotMatch No Doppio Rende l'operazione di eliminazione condizionale al fatto che la generazione corrente dell'oggetto non corrisponda alla un determinato valore. Se non esiste alcun oggetto attivo, la condizione preliminare non funziona. Impostando questo valore su 0 consente di completare l'operazione solo se è presente una versione live dell'oggetto.
IfMetagenerationMatch No Doppio Rende l'operazione di eliminazione condizionale all'eventuale metagenerazione attuale dell'oggetto corrisponde al valore specificato.
IfMetagenerationNotMatch No Doppio Condiziona l'operazione di eliminazione a seconda che la metagenerazione corrente dell'oggetto non corrisponda al valore specificato.

Azione SignURL

La tabella seguente descrive i parametri di input dell'azione SignURL che crea un URL firmato per l'oggetto specificato.

Nome parametro Obbligatorio Tipo di dati Descrizione
Bucket Sì Stringa Il nome del bucket in cui si trova l'oggetto.
Oggetto Sì Stringa Il nome dell'oggetto per il quale generare il SignedURL.
RequestMethod No Stringa Il metodo che verrà utilizzato dalla richiesta firmata. Il valore predefinito è GET.
Località No Stringa Località del bucket specificato. Il valore predefinito è auto.
ActiveDateTime No Stringa La data e l'ora in cui SignedURL diventerà attivo. Se non specificato, verrà utilizzata la data corrente.
Query No Stringa La stringa di query che deve essere inclusa quando si utilizza SignedURL. Se non viene specificata, non verrà utilizzata alcuna stringa di query.
CustomHeaders No Stringa Un elenco separato da virgole di name=value delle intestazioni da utilizzare con SignedURL. Se non vengono specificate, vengono utilizzate le intestazioni personalizzate.
ExpiresIn Sì Stringa La data e l'ora di scadenza dell'URL SignedURL devono essere nel formato: 1d2h3m4s, il valore massimo è 7d0h0m0s.
HmacAccessKey No Stringa La chiave di accesso HMAC. Per informazioni, vedi Chiavi HMAC.
HmacSecret No Stringa Il secret HMAC.

Esempi

Gli esempi in questa sezione descrivono le seguenti operazioni:

  • Elenca tutti gli oggetti
  • Elenco di tutti gli oggetti in un bucket
  • Elenca tutti i bucket
  • Scaricare un oggetto
  • Scaricare un oggetto binario
  • Carica un oggetto binario in un bucket
  • Carica un oggetto in un bucket
  • Carica un oggetto in una cartella
  • Copiare un oggetto
  • Spostare un oggetto
  • Elimina un oggetto
  • Creare un URL firmato per un oggetto

La tabella seguente elenca gli scenari di esempio e la configurazione corrispondente nell'attività Connettori:

Attività Configurazione
Elenca tutti gli oggetti
  1. Nella finestra di dialogo Configure connector task, fai clic su Entities.
  2. Seleziona l'entità Objects e poi l'operazione List.
  3. Fai clic su Fine.

Vengono elencati tutti gli oggetti in tutti i bucket. Gli oggetti sono elencati nel parametro di risposta connectorOutputPayload dell'attività Connectors.
Elenca tutti gli oggetti in un bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Entities.
  2. Seleziona l'entità Objects e poi l'operazione List.
  3. Fai clic su Fine.
  4. Imposta filterClause sul nome del bucket da cui vuoi elencare gli oggetti. Per impostare la clausola, nella sezione Task Input dell'attività Connectors, fai clic su filterClause e poi inserisci Bucket = 'BUCKET_NAME' nel campo Valore predefinito. Ad esempio, Bucket = 'bucket_01'.
Elenca tutti i bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Entities.
  2. Seleziona l'entità Buckets e poi l'operazione List.
  3. Fai clic su Fine.
Scaricare un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione DownloadObject e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci un valore simile al seguente nella Campo Default Value: 
    {
  "Bucket": "bucket-test-01",
  "ObjectFilePath": "logfile.txt"
}

    4. Questo esempio scarica il file logfile.txt. I contenuti del file scaricato sono disponibili in formato JSON nel parametro di risposta connectorOutputPayload dell'attività Connectors.
Scaricare un oggetto binario

La procedura per scaricare un oggetto binario è la stessa utilizzata per scaricare un oggetto normale. descritti in precedenza. Inoltre, devi specificare HasBytes come true nel connectorInputPayload. L'oggetto viene scaricato come stringa con codifica Base64. Valore di esempio per il campo connectorInputPayload:

{
"Bucket": "bucket-test-01",
"ObjectFilePath": "image01.png",
"HasBytes" : true
}

Se il download va a buon fine, l'output nel campo connectorOutputPayload sarà simile al seguente:

{
"Success": "true",
"ContentBytes": "SGVsbG8gdGVzdCE\u003d"
}

Per impostazione predefinita, il campo HasBytes è impostato su false.

Se il file contiene caratteri speciali, come ä, Ø, Thành:

  1. Codifica in UTF-8: codifica il file in UTF-8 per gestire i caratteri speciali.
  2. Converti in Base64: converti il file in Base64 per assicurarti che il testo originale rimanga invariato.
  3. Decodifica la stringa Base64: decodifica il file in una stringa Base64 per recuperare il valore originale con i caratteri speciali.
Carica un oggetto binario in un bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione UploadObject e poi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload e poi inserisci quanto segue nel Default Value campo: 
    {
"ContentBytes": "SGVsbG8gVGVzdCE=",
"Bucket": "bucket-test-01",
"ObjectName" : "test-file-01",
"HasBytes": true
}

    4. Questo esempio crea il file test-file-01 nel bucket bucket-test-01. Se c'è un file esistente con il nome test-file-01, verrà sovrascritto.
Caricare un oggetto in un bucket
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione UploadObject e poi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"Content": "Hello test!",
"Bucket": "bucket-test-01",
"ObjectName" : "test-file-01.txt"
}

    4. Questo esempio crea il file test-file-01.txt con i contenuti Hello test! nel bucket bucket-test-01. Se c'è un file esistente con il nome test-file-01.txt, verrà sovrascritto.
Caricare un oggetto in una cartella
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione UploadObject e poi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"Content": "Hello test!",
"Bucket": "bucket-test-01",
"FolderPath": "folderA",
"ObjectName": "test-file-01.txt"
}

    4. Questo esempio crea il file test-file-01.txt con i contenuti Hello test! nella cartella folderA di bucket-test-01. Se contiene un file esistente con il nome test-file-01.txt, questo verrà sovrascritto.
Copiare un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione CopyObject e poi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"BucketSource": "bucket_01",
"ObjectSource": "folderA/logfile.txt",
"BucketDestination": "bucket_02",
"ObjectDestination": "folderB/logfile.txt"
}

    4. Questo esempio copia il file folderA/logfile.txt da Da bucket_01 a folderB/logfile.txt in bucket_02.

Se la copia è riuscita, l'output nel campo connectorOutputPayload sarà simile al seguente:

{
"Success": "true"
}
Spostare un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione MoveObject e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload e poi inserisci quanto segue nel Default Value campo: 
    {
"BucketSource": "bucket_01",
"ObjectSource": "folderA/logfile.txt",
"BucketDestination": "bucket_02",
"ObjectDestination": "folderB/logfile.txt"
}

    4. Questo esempio sposta il file folderA/logfile.txt da bucket_01 a folderB/logfile.txt in bucket_02.

Se la copia è riuscita, l'output nel campo connectorOutputPayload sarà simile al seguente:

{
"Success": "true"
}
Elimina un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione DeleteObject e fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"BucketSource": "bucket_01",
"ObjectSource": "logfile.txt"
}

    4. Questo esempio elimina il file logfile.txt da bucket_01.

Se la copia è riuscita, l'output nel campo connectorOutputPayload sarà simile al seguente:

{
"Success": "true"
}
Creare un URL firmato per un oggetto
  1. Nella finestra di dialogo Configure connector task, fai clic su Actions.
  2. Seleziona l'azione SignURL e poi fai clic su Fine.
  3. Nella sezione Input attività dell'attività Connettori, fai clic su connectorInputPayload, quindi inserisci quanto segue nel Campo Default Value: 
    {
"Bucket": "bucket-test-01",
"ObjectName" : "test-file-01.txt"
}

    4. Questo esempio crea un URL firmato per il file test-file-01.txt che si trova nel bucket bucket-test-01. Se l'azione ha esito positivo, riceverai l'URL firmato nella risposta simile al seguente:

    {
"Success": "true",
"SignURL": "https://storage.googleapis.com/example-bucket/cat.jpeg?X-Goog-Algorithm=
GOOG4-RSA-SHA256&X-Goog-Credential=example%40example-project.iam.gserviceaccount.com
%2F20181026%2Fus-central1%2Fstorage%2Fgoog4_request&X-Goog-Date=20181026T18
1309Z&X-Goog-Expires=900&X-Goog-SignedHeaders=host&X-Goog-Signature=247a2aa45f16
9edf4d187d54e7cc46e4731b1e6273242c4f4c39a1d2507a0e58706e25e3a85a7dbb891d62afa849
6def8e260c1db863d9ace85ff0a184b894b117fe46d1225c82f2aa19efd52cf21d3e2022b3b868dc
c1aca2741951ed5bf3bb25a34f5e9316a2841e8ff4c530b22ceaa1c5ce09c7cbb5732631510c2058
0e61723f5594de3aea497f195456a2ff2bdd0d13bad47289d8611b6f9cfeef0c46c91a455b94e90a
66924f722292d21e24d31dcfb38ce0c0f353ffa5a9756fc2a9f2b40bc2113206a81e324fc4fd6823
a29163fa845c8ae7eca1fcf6e5bb48b3200983c56c5ca81fffb151cca7402beddfc4a76b13344703
2ea7abedc098d2eb14a7"
}

Considerazioni

  • Un oggetto scaricabile può avere una dimensione massima di 10 MB.
  • Non puoi caricare più file utilizzando l'azione UploadObject. Puoi caricare un solo file.

Utilizzare Terraform per creare connessioni

Puoi utilizzare la risorsa Terraform per creare una nuova connessione.

Per scoprire come applicare o rimuovere una configurazione Terraform, consulta: Comandi Terraform di base.

Per visualizzare un modello Terraform di esempio per la creazione di una connessione, consulta il modello di esempio.

Quando crei questa connessione utilizzando Terraform, devi impostare le seguenti variabili nel file di configurazione di Terraform:

Nome parametro Tipo di dati Obbligatorio Descrizione
project_id STRING Vero L'ID del progetto Google Cloud in cui si trovano i dati.

Utilizzare la connessione Cloud Storage in un'integrazione

Una volta creata, la connessione diventa disponibile sia nell'integrazione Apigee sia nell'integrazione delle applicazioni. Puoi utilizzare la connessione in un'integrazione tramite l'attività Connettori.

  • Per capire come creare e utilizzare l'attività Connectors in Apigee Integration, vedi Attività connettori.
  • Per capire come creare e utilizzare l'attività Connettori in Application Integration, vedi Attività connettori.

Ricevere assistenza dalla community Google Cloud

Puoi pubblicare le tue domande e discutere di questo connettore in Google Cloud nei forum di Cloud.

Passaggi successivi