Questa pagina fornisce una panoramica delle notifiche Pub/Sub per di archiviazione ideale in Cloud Storage.
Panoramica
Le notifiche Pub/Sub inviano informazioni sulle modifiche a oggetti nei tuoi bucket in Pub/Sub, dove vengono aggiunte le informazioni in un argomento Pub/Sub di tua scelta sotto forma di messaggi. Per Ad esempio, puoi tenere traccia degli oggetti che vengono creati ed eliminati nel tuo bucket. Ciascuna notifica contiene informazioni che descrivono sia l'evento che l'ha attivata sia l'oggetto modificato.
Puoi inviare notifiche a qualsiasi argomento Pub/Sub di tutti i progetti per i quali disponi di autorizzazioni sufficienti. Una volta ricevuto dall'argomento Pub/Sub, i sottoscrittori dell'argomento possono ricevere il messaggio associato. Per informazioni su come connettere i tuoi bucket Cloud Storage a un argomento Pub/Sub, consulta la sezione Prerequisiti.
Altre opzioni di notifica
L'iscrizione alle notifiche Pub/Sub è un modo versatile attivare avvisi e azioni in risposta ai cambiamenti in un bucket. Sono disponibili anche le seguenti opzioni:
Funzioni Cloud Run: se vuoi attivare solo una funzione autonoma e leggera in risposta agli eventi e non vuoi gestire un argomento Pub/Sub, utilizza le funzioni Cloud Run. Le funzioni Cloud Run ti consentono di eseguire funzioni C#, Go, Java, Node.js, Python, PHP e Ruby quando un oggetto nel tuo bucket cambia. Tieni presente che Il bucket deve trovarsi nello stesso progetto delle funzioni Cloud Run. Guarda il tutorial associato per una dimostrazione dell'utilizzo. Funzioni di Cloud Run con Cloud Storage.
Notifica di modifica dell'oggetto: la notifica di modifica dell'oggetto è una notifica separata una vecchia funzionalità in Cloud Storage per la generazione di notifiche. Questo invia messaggi HTTPS a un'applicazione client che hai configurato separatamente. Generalmente questa funzione non è consigliata in quanto Le notifiche Pub/Sub sono più economiche, più facili da usare più flessibile.
Configurazioni delle notifiche
Una configurazione di notifica è una regola che colleghi a un bucket e che specifica:
- L'argomento in Pub/Sub che riceve le notifiche.
- Gli eventi che attivano l'invio di una notifica.
- Le informazioni contenute nelle notifiche.
Puoi allegare più configurazioni di notifica a un bucket. Un bucket può avere fino a 100 configurazioni di notifica in tutto e fino a 10 configurazioni di notifica impostate per attivare un evento specifico.
Ad esempio, se hai una configurazione di notifica che invia notifiche di eliminazione a un argomento Pub/Sub, puoi aggiungere al bucket una seconda configurazione di notifica che invii notifiche di eliminazione a un altro argomento. Tuttavia, se provi a creare più di 10 notifiche configurazioni che eseguono questa operazione, ricevi un errore. Oltre a questi configurazioni delle notifiche, puoi anche creare configurazioni che inviano notifiche per altri eventi, come la creazione di oggetti, a gli argomenti Pub/Sub utilizzati dalle notifiche di eliminazione oppure per argomenti diversi.
Ogni configurazione di notifica è identificata da un numero intero. Viene restituito questo numero intero:
- Quando crei la configurazione delle notifiche.
- Quando elenchi le configurazioni delle notifiche collegate a un bucket.
- Nell'attributo
notificationConfig
di ogni notifica attivata dalla configurazione delle notifiche.
La creazione e l'eliminazione delle configurazioni di notifica incrementa il numero di metagenerazione di un bucket.
Tipi di evento
Di seguito è riportato un elenco dei tipi di eventi supportati da Cloud Storage:
Tipo di evento | Descrizione |
---|---|
OBJECT_FINALIZE |
Inviata in caso di creazione di un nuovo oggetto (o di nuova generazione di un oggetto esistente) nel bucket. Sono considerate creazioni anche la copia, la riscrittura o il ripristino di un oggetto esistente. Questo evento non viene attivato da un caricamento non riuscito. |
OBJECT_METADATA_UPDATE |
Inviato in caso di variazioni nei metadati di un oggetto esistente. |
OBJECT_DELETE |
Inviato quando un oggetto è stato eliminato definitivamente. Sono inclusi gli oggetti che vengono sostituiti o eliminati nell'ambito della configurazione del ciclo di vita del bucket. Non sono inclusi gli oggetti che diventano non correnti (vedi OBJECT_ARCHIVE ) o i caricamenti suddivisi in più parti interrotti. |
OBJECT_ARCHIVE |
Inviato solo quando è abilitato il controllo delle versioni degli oggetti nel bucket. Questo evento indica che la versione live di un oggetto è diventata una versione non corrente, perché è stata resa esplicitamente non corrente o perché è stata sostituita dal caricamento di un oggetto con lo stesso nome. |
Per altri eventi Cloud Storage, come operazioni sui bucket o letture di oggetti, puoi attivare il tipo di log di controllo appropriato in Cloud Audit Logs e indirizzare gli audit log a Pub/Sub utilizzando un filtro.
Sostituzione di oggetti
La sostituzione di un oggetto esistente con uno nuovo con lo stesso nome attiva due eventi distinti: OBJECT_FINALIZE
per la nuova versione dell'oggetto e OBJECT_ARCHIVE
o OBJECT_DELETE
per l'oggetto sostituito. La
OBJECT_FINALIZE
evento contiene un attributo aggiuntivo overwroteGeneration
,
che fornisce il numero di generazione dell'oggetto che è stato sostituito. L'evento OBJECT_ARCHIVE
o OBJECT_DELETE
contiene un attributo aggiuntivo overwrittenByGeneration
, che fornisce il numero di generazione del nuovo oggetto.
Formato delle notifiche
Le notifiche inviate all'argomento Pub/Sub sono composte da due parti:
- Attributi: un set di coppie chiave:valore che descrivono l'evento.
- Payload: una stringa contenente i metadati dell'oggetto modificato.
Attributi
Gli attributi sono coppie chiave:valore contenute in tutte le notifiche inviate da da Cloud Storage all'argomento Pub/Sub. Notifiche sempre contengono il seguente set di coppie chiave:valore, indipendentemente dallo stato della notifica payload:
Nome attributo | Esempio | Descrizione |
---|---|---|
notificationConfig | projects/_/buckets/foo/notificationConfigs/3 |
Un identificatore per la configurazione di notifica che ha attivato questa notifica. |
eventType | OBJECT_FINALIZE |
Il tipo di evento che si è appena verificato. Consulta Tipi di eventi per un elenco dei valori possibili. |
payloadFormat | JSON_API_V1 |
Il formato del payload dell'oggetto. Consulta Payload per un elenco dei possibili valori. |
bucketId | foo |
Il nome del bucket che contiene l'oggetto modificato. |
objectId | bar |
Il nome dell'oggetto modificato. |
objectGeneration | 123456 |
Il numero di generazione dell'oggetto modificato. |
eventTime | 2021-01-15T01:30:15.01Z |
L'ora in cui si è verificato l'evento, espressa nel formato RFC 3339. |
A volte le notifiche contengono il seguente insieme di coppie chiave:valore, a prescindere dal payload della notifica:
Nome attributo | Esempio | Descrizione |
---|---|---|
overwrittenByGeneration | 107458 |
Il numero di generazione dell'oggetto che ha sostituito l'oggetto a cui si riferisce questa notifica. Questo attributo viene visualizzato negli eventi OBJECT_ARCHIVE o OBJECT_DELETE solo in caso di sostituzione. |
overwroteGeneration | 352947 |
Il numero di generazione dell'oggetto che è stato sostituito dall'oggetto a cui appartiene questa notifica. Questo attributo viene visualizzato negli eventi OBJECT_FINALIZE solo in caso di sostituzione. |
Oltre agli attributi precedenti, una configurazione di notifica può contenere
fino a 10 attributi personalizzati. Gli attributi personalizzati vengono definiti durante la creazione di una configurazione di notifica utilizzando --custom-attributes
in un comando gcloud storage
o l'oggetto custom_attributes
nel corpo di una richiesta JSON POST notificationConfigs
.
Payload
Il payload è una stringa che contiene i metadati dell'oggetto modificato. Quando crei una configurazione delle notifiche, specifichi un tipo di payload includi nelle notifiche attivate da quella configurazione. Puoi specificare i seguenti tipi di payload:
Tipo di payload | Descrizione |
---|---|
NONE | La notifica non include alcun payload. |
JSON_API_V1 | Il payload sarà una stringa UTF-8 contenente la rappresentazione della risorsa dei metadati dell'oggetto. |
Per le notifiche OBJECT_DELETE
, i metadati contenuti nel payload rappresentano
i metadati dell'oggetto come erano prima dell'eliminazione, insieme a un
proprietà timeDeleted
. Per tutte le altre notifiche, i metadati inclusi nel payload rappresentano i metadati dell'oggetto dopo la modifica.
Ad esempio, supponiamo che tu abbia una configurazione delle notifiche
monitora eventi di OBJECT_METADATA_UPDATE
. Se un utente modifica la proprietà contentType
di un oggetto da binary/octet-stream
a video/mp4
, viene inviata una
notifica OBJECT_METADATA_UPDATE
e i metadati nel
payload includono "contentType":"video/mp4"
.
Garanzie di consegna
Quando aggiungi una configurazione di notifica, Cloud Storage potrebbe occupare a 30 secondi per iniziare a inviare notifiche associate. Una volta avviato, Cloud Storage garantisce la consegna "almeno una volta" a Pub/Sub. Pub/Sub offre anche la consegna almeno una volta al destinatario, il che significa che potresti ricevere più messaggi con più ID che rappresentano lo stesso evento Cloud Storage.
Non è garantito che le notifiche vengano pubblicate nell'ordine in cui vengono ricevute da Pub/Sub. Se prevedi di modificare l'oggetto Cloud Storage in base a una notifica, ti consigliamo di utilizzare i numeri di generazione e metagenerazione dell'oggetto come prerequisiti nella richiesta di aggiornamento.
Se una notifica non può essere recapitata costantemente a un Pub/Sub , Cloud Storage potrebbe eliminare la notifica dopo 7 giorni. Consegna a domicilio l'errore può verificarsi quando l'argomento Pub/Sub non esiste più, Cloud Storage non dispone più dell'autorizzazione per pubblicare nell'argomento, o quando il progetto proprietario dell'argomento supera la quota di pubblicazione.
Passaggi successivi
- Configura le notifiche Pub/Sub per Cloud Storage.
- Scopri di più su Pub/Sub.
- Iscriviti a un bucket per ricevere le notifiche inviate a e Pub/Sub,
- Utilizza le funzioni Cloud Run per pubblicare eventi con un trigger Cloud Storage.
- Utilizza le notifiche Pub/Sub per i trasferimenti basati su eventi tra i bucket di Cloud Storage.