Tablet caldi

Per aiutarti a risolvere i problemi di prestazioni, Bigtable offre la possibilità di identificare e osservare i tablet caldi in un cluster. In questa pagina vengono descritti tablet caldi, ti dice come ottenere un elenco di tablet caldi e parla situazioni in cui l'identificazione dei tablet caldi è utile. Prima di leggere questa pagina, dovresti leggere Panoramica di Bigtable.

Il nome del metodo che utilizzi per ottenere un elenco di tablet hot varia a seconda della lingua utilizzata. Per semplicità, in questo documento il metodo viene indicato con il nome dell'API RPC Cloud Bigtable Admin, ListHotTablets. Puoi ottenere un elenco di hot tablet utilizzando quanto segue:

L'identificazione dei tablet con problemi può aiutarti a svolgere le seguenti attività:

Informazioni sui tablet caldi

Una tabella Bigtable viene partizionata orizzontalmente in blocchi di righe contigue, chiamate tablet, per consentire il bilanciamento del carico di lavoro delle query. Ogni tablet è associato a un nodo e le operazioni su queste righe vengono eseguite sul nodo. Per ottimizzare le prestazioni, i tablet vengono suddivisi o spostati in un altro nodo a seconda dei pattern di accesso. In base ai pattern di accesso degli utenti (lettura, scrittura e delle operazioni di scansione: i tablet vengono ribilanciati tra i nodi. Per informazioni dettagliate sul bilanciamento del carico, consulta In che modo Bigtable ottimizza i dati nel tempo.

Un tablet hot è un tablet che mostra un sovrautilizzo della CPU del nodo perché il tablet utilizza una percentuale sproporzionata di CPU rispetto altri tablet. Questo utilizzo non bilanciato dei nodi può causare latenza e ritardi nella replica.

Tra le cause più frequenti dei tablet caldi ci sono gli hotspot, che si verificano quando l'applicazione accede frequentemente alle righe vicine tra loro nella tabella. Gli hotspot sono spesso il risultato di una progettazione di uno schema non ottimizzato per la diffusione i pattern di accesso dell'applicazione nella tabella. Per scoprire come progettare le chiavi di riga in modo da evitare gli hotspot, consulta le best practice per la progettazione dello schema.

Per visualizzare un elenco di tablet caldi, devi essere assegnato a un ruolo con Autorizzazione bigtable.viewer.

Output

Il metodo ListHotTablets restituisce i seguenti dati per un determinato cluster in un'istanza.

  • Nome del tablet. L'ID univoco assegnato da Bigtable il tablet caldo. Questo campo non viene visualizzato da gcloud CLI.
  • Table. L'ID della tabella associata alla scheda attiva.
  • Utilizzo CPU. L'utilizzo medio della CPU del nodo associato il tablet caldo, espresso in percentuale, durante questo intervallo di un minuto. Questa percentuale è la media della somma di CPU in scrittura e in lettura da CPU dall'ora di inizio all'ora di fine.
  • Ora di inizio. L'ora di inizio del periodo del tablet caldo.
  • Ora di fine. L'ora di fine del periodo di tablet caldo.
  • Chiave iniziale. La chiave della prima riga nel tablet caldo.
  • Chiave finale. L'ultima chiave di riga nel tablet caldo. Viene aggiunto un suffisso \000 quando la chiave di inizio e di fine sono uguali, a indicare che il tablet occupa una singola riga.

Le chiavi sono ordinate in modo grammaticale all'interno di un tablet, quindi qualsiasi chiave compresa tra l'inizio e la chiave finale sono contenute nel tablet.

Gli hotspot vengono calcolati con una risoluzione di un minuto e un tablet potrebbe riapparire nell'output. In altre parole, un singolo tablet può essere considerato più minuti.

Per impostazione predefinita, ListHotTablets esegue ricerche nelle ultime 24 ore. Per eseguire ricerche in un intervallo di tempo specifico, specifica un'ora di inizio e un'ora di fine.

Il numero massimo di tablet caldi restituiti è 50. Per modificare questa impostazione, specifica un formato di pagina.

Il metodo restituisce un elenco vuoto se nessuno dei tablet nel cluster è hot.

Esempio di utilizzo di gcloud CLI

Prima di copiare questo esempio, installa l'interfaccia a riga di comando gcloud.

Per visualizzare un elenco di tablet attivi per un determinato cluster, esegui il comando hot-tablets list in Cloud Shell o nella finestra del terminale locale.

  gcloud bigtable hot-tablets list CLUSTER_ID --instance INSTANCE_ID

Sostituisci quanto segue:

  • CLUSTER_ID: l'identificatore permanente per il cluster
  • INSTANCE_ID: l'identificatore permanente dell'istanza

Se i tablet del cluster sono caldi, il terminale mostra un output simile al seguente. Le schede con elevato utilizzo in un cluster sono elencate in ordine decrescente di utilizzo della CPU.

TABLE      CPU_USAGE  START_TIME                 END_TIME                   START_KEY            END_KEY
test-data  89.3       2021-12-14T01:19:57+00:00  2021-12-14T01:20:57+00:00  user29333893046…    user29333893046…
test-data  22.8       2021-12-14T01:04:59+00:00  2021-12-14T01:06:59+00:00  user29333893046…    user29345657428…
test-data  20.9       2021-12-14T01:18:56+00:00  2021-12-14T01:20:56+00:00  user54519105346…    user545293
test-data  16.5       2021-12-14T01:18:56+00:00  2021-12-14T01:20:56+00:00  user49196524328…    user49206

Casi d'uso per i dati di tablet caldi

L'identificazione di tablet hot in un cluster può aiutarti a risolvere i problemi relativi alle prestazioni che le applicazioni presentino problemi di prestazioni. Puoi utilizzare il metodo ListHotTablets in combinazione con altri strumenti di monitoraggio, come lo strumento di diagnostica Key Visualizer per Bigtable.

Identificazione delle chiavi di riga problematiche

Puoi utilizzare ListHotTablets per identificare chiavi di riga e intervalli di righe specifici. Questo può fornire l'osservabilità dei pattern di accesso che potrebbero essere la causa degli hotspot.

Ad esempio, supponiamo che lo schema chiave di riga di una tabella [user_id]#[event_timestamp], ID utente e timestamp separati da un hash . Un elenco di tablet caldi può aiutarti a determinare se un utente specifico Gli ID o i timestamp degli eventi causano gli hotspot. Identificare i pattern di accesso consente di eseguire ulteriori azioni, ad esempio riprogettare le chiavi di riga o le tabelle da distribuire in modo più uniforme nello spazio delle chiavi. In questo esempio, se gli ID utente sono aumentando e causando hotspot in modo monotonico per questo motivo, potresti assegnare gli ID utente in un ordine diverso o utilizzano identificatori univoci universali (UUID) .

Quando le chiavi di riga iniziale e finale sono uguali e la chiave di riga finale viene aggiunta con un suffisso \000, viene creato un tablet con una sola riga. Quando il tablet riceve una quantità di traffico sproporzionata, porta agli hotspot.

Rilevamento degli hotspot con granularità al minuto

Puoi usare un elenco di tablet attivi insieme a Key Visualizer mappe termiche. Sebbene Key Visualizer sia un buon strumento per osservare il quadro più ampio dei pattern di accesso allo spazio delle chiavi, ListHotTablets offre una maggiore granularità.

Dopo aver esaminato le mappe termiche in Key Visualizer, puoi esplorare ulteriormente hotspot. Poiché Key Visualizer viene eseguito per un periodo di settimane, i suoi dati vengono aggregati in intervalli di 15 minuti. Inoltre, più tablet potrebbero essere combinati nello stesso spazio chiavi di Key Visualizer.

Dopo aver utilizzato Key Visualizer per identificare l'intervallo di tempo in cui si sono verificati gli hotspot, puoi eseguire ListHotTablets per una maggiore granularità sia nello spazio delle chiavi sia in quello del tempo. Una maggiore granularità è particolarmente utile per l'utilizzo periodico. ListHotTablets può identificare hotspot di breve durata che KeyVisualizer non è in grado di rilevare.

Identificare le tabelle problematiche all'interno di un cluster

Poiché Key Visualizer opera a livello di tabella, non è sempre per la risoluzione di un problema in un cluster con più tabelle. ListHotTablets opera a livello di cluster, quindi puoi utilizzarlo per identificare le tabelle con un utilizzo elevato della CPU e circoscrivere il problema.

Passaggi successivi