Questo documento elenca le quote che si applicano a Dataplex.
Google Cloud utilizza le quote per garantire l'equità e ridurre i picchi di utilizzo e disponibilità delle risorse. Una quota limita la quantità di una Google Cloud risorsa che Google Cloud il progetto può utilizzare. Le quote si applicano a una serie di tipi di risorse, inclusi hardware, software e componenti di rete. Ad esempio, le quote possono limitare il numero di chiamate API a un servizio, il numero di bilanciatori del carico utilizzati contemporaneamente dal tuo progetto o il numero di progetti che puoi creare. Le quote proteggono la community degli utenti diGoogle Cloud impedendo il sovraccarico dei servizi. Le quote ti aiutano inoltre a gestire le tue Google Cloud risorse.
Il sistema delle quote di Cloud esegue le seguenti operazioni:
- Monitora il tuo consumo di Google Cloud prodotti e servizi
- Limita il consumo di queste risorse
- Fornisce un modo per richiedere modifiche al valore della quota e automatizzare gli aggiustamenti della quota
Nella maggior parte dei casi, quando provi a utilizzare una risorsa per un volume maggiore di quello consentito dalla quota, il sistema blocca l'accesso alla risorsa e l'attività che stai tentando di eseguire non va a buon fine.
In genere, le quote si applicano a livello di progetto Google Cloud. L'utilizzo di una risorsa in un progetto non influisce sulla quota disponibile in un altro progetto. All'interno di un progetto Google Cloud, le quote sono condivise tra tutte le applicazioni e gli indirizzi IP.
Esistono inoltre limiti di sistema per le risorse Dataplex. I limiti di sistema non possono essere modificati.
Dataplex applica quote al numero di richieste API durante un periodo di tempo specifico e al numero di risorse che possono essere create in un progetto. Le quote ti proteggono da picchi di utilizzo imprevisti e da servizi sovraccaricati. Scopri di più sul motivo per cui le quote vengono applicate.
Le tue esigenze di quota potrebbero aumentare man mano che utilizzi Dataplex. Se una quota è troppo bassa per soddisfare le tue esigenze o prevedi un aumento imminente dell'utilizzo, puoi richiedere un aumento della quota in modo proattivo.
Quote per le richieste dell'API Dataplex
L'API Dataplex applica quote per la gestione delle risorse di Dataplex Catalog e per le richieste di ricerca a diversi livelli, indipendentemente dalla loro origine. Sono incluse le richieste provenienti direttamente dalle chiamate API, dalle librerie client, dall'interfaccia a riga di comando Google Cloud e dalla console Google Cloud.
Le seguenti quote si applicano alle richieste Dataplex:
| Quota | Predefinito |
|---|---|
| Richieste di lettura per voci e aspetti per progetto, per regione e al minuto | 6000 |
| Richieste di scrittura per voci e aspetti per progetto, per regione e al minuto | 1500 |
| Richieste di lettura per tipi di aspetti, tipi di voci e gruppi di voci per progetto, per utente e per minuto | 100 |
| Richieste di lettura per tipi di aspetto, tipi di voci e gruppi di voci per progetto al minuto | 200 |
| Richieste di scrittura per tipi di aspetti, tipi di voci e gruppi di voci per progetto, per utente e al minuto | 10 |
| Richieste di scrittura per tipi di aspetti, tipi di voci e gruppi di voci per progetto al minuto | 20 |
| Richieste di ricerca per progetto, per utente e per minuto | 900 |
| Richieste di ricerca al minuto per progetto | 1200 |
| Richieste di ricerca per organizzazione al minuto | 2400 |
| Richieste di ricerca per organizzazione al giorno | 345600 |
| Richieste di lettura per job di metadati per progetto, per regione e per minuto | 400 |
| Richieste di lettura per job di metadati per progetto, per utente, per regione e per minuto | 200 |
| Richieste di scrittura per job di metadati per progetto, per regione e per minuto | 20 |
| Richieste di scrittura per job di metadati per progetto, per utente, per regione e al minuto | 10 |
Per ogni richiesta Dataplex elencata nella tabella seguente, la quota viene applicata sia a livello di progetto sia a livello di progetto per utente.
| Quota | Esempi |
|---|---|
| Richieste di lettura per la gestione delle risorse | Ottieni un lake, elenca le zone |
| Richieste di scrittura per la gestione delle risorse | Creare un lake, eliminare una risorsa |
| Ricevere richieste di metadati | Recupera un'entità, recupera una partizione |
| Elenca le richieste di metadati | Elenca entità, elenca partizioni |
| Richieste di scrittura per i metadati | Aggiornare un'entità, eliminare una partizione |
| Richieste di lettura per le risorse di attività e job | Recupera un'attività, elenca i job |
| Richieste di scrittura per risorse di attività e job | Creare un'attività, annullare un job |
| Impostare le richieste dei criteri IAM | Imposta un criterio IAM |
Quote per le richieste dell'API Data Lineage
L'API Data Lineage applica le quote per quanto segue:
- Richieste di lettura che restituiscono solo i dati
- Richieste di scrittura che creano o modificano i dati
- Crea Open Lineage
Le seguenti quote si applicano alle richieste relative all'origine dei dati:
| Quota | Valore predefinito |
|---|---|
| Richieste di lettura per progetto, per utente, per regione e per minuto | 1000 |
| Richieste di scrittura per progetto, per utente, per regione e al minuto | 6000 |
| Richieste di Lineage aperte per progetto, per utente, per regione e per minuto | 3000 |
Quote per le risorse
La quota delle risorse viene applicata a livello di progetto per i seguenti tipi di risorse: lake, zona, asset, attività on demand, attività ricorrente. Puoi controllare l'utilizzo corrente della quota Dataplex nella pagina Quote della console Google Cloud.
Richiedi un aumento della quota
Nella console Google Cloud, vai alla pagina Quote.
Seleziona la quota da modificare.
Fai clic su Altre azioni > Modifica quota.
Inserisci il nuovo valore di quota e una descrizione della richiesta.
Fai clic su Avanti.
Inserisci i dati di contatto.
Fai clic su Invia richiesta.
Per modificare la maggior parte delle quote, utilizza la console Google Cloud. Per ulteriori informazioni, consulta Richiedere un valore di quota più elevato.
Dipendenze delle quote
L'utilizzo di Dataplex potrebbe coinvolgere altri Google Cloud prodotti. Ad esempio, la scoperta dei dati richiede l'invocazione delle API Cloud Storage e/o BigQuery per interagire con le risorse sottostanti. Questi prodotti hanno quote a livello di progetto che includono le quote applicabili all'utilizzo di Dataplex.
Pagine delle quote di altri prodotti che potresti utilizzare con Dataplex:
Questo elenco non è esaustivo.
Limiti
I seguenti limiti si applicano a Dataplex Catalog e alla ricerca:
| Limite | Valore |
|---|---|
| Dimensioni di una richiesta di voce e aspetti (incluso l'aspetto dello schema) | 2 MB |
| Lunghezza di un ID voce | 4000 caratteri |
| Lunghezza di un nome completo in una voce | 4000 caratteri |
| Lunghezza del nome visualizzato dell'origine della voce in una voce | 500 caratteri |
| Lunghezza della descrizione dell'origine voce in una voce | 2000 caratteri |
| Lunghezza della risorsa dell'origine della voce in una voce | 4000 caratteri |
| Lunghezza del sistema di origine della voce in una voce | 64 caratteri |
| Lunghezza della piattaforma di origine della voce in una voce | 64 caratteri |
| Lunghezza delle etichette delle origini delle voci in una voce | 128 caratteri per ogni chiave e valore |
| Dimensioni dei contenuti JSON in un aspetto (tranne l'aspetto schema) | 120 KB |
| Dimensioni totali di una voce | 5 MB |
| Numero massimo di aspetti in una voce | 10.000 |
| Lunghezza del nome visualizzato del tipo di voce, del tipo di aspetto e del gruppo di voci | 256 |
| Lunghezza della descrizione del tipo di voce, del tipo di aspetto e del gruppo di voci | 1024 |
| Lunghezza del nome del campo in un modello di tipo di aspetto | 63 |
| Numero massimo di tipi di aspetti obbligatori in un tipo di voce | 20 |
| Numero massimo di valori di enumerazione in un modello di tipo di aspetto | 1024 |
| Numero massimo di elementi nei risultati di ricerca di Dataplex | 500 |