Avvia PGAdapter

Questa pagina spiega come avviare PGAdapter in Spanner. Per scoprire di più su PGAdapter, consulta Informazioni su PGAdapter. Per ottenere il binario PGAdapter, vedi Ottenere PGAdapter.

Puoi avviare PGAdapter nei seguenti modi:

  • Come processo autonomo
  • All'interno di un container Docker
  • Su Cloud Run
  • Utilizzo di PGAdapter come proxy sidecar (ad esempio, in un cluster Kubernetes)
  • In-process con la tua applicazione Java

Prima di iniziare

Prima di avviare PGAdapter, assicurati di aver eseguito l'autenticazione con un account utente o unaccount di serviziot sulla macchina in cui verrà eseguito PGAdapter. Se utilizzi un account di servizio, devi conoscere la posizione del file della chiave JSON (il file delle credenziali). Puoi specificare il percorso delle credenziali con l'opzione -c di PGAdapter o impostando la variabile di ambiente GOOGLE_APPLICATION_CREDENTIALS.

Per ulteriori informazioni, vedi:

Scegli un metodo per eseguire PGAdapter

Puoi avviare PGAdapter come processo autonomo, all'interno di un container Docker, su Cloud Run o in-process con la tua applicazione Java. Quando avvii PGAdapter, specifichi il progetto, l'istanza Spanner e il database a cui connetterti. Puoi anche specificare il percorso di un file delle credenziali (file della chiave) in formato JSON.

Autonoma

Scarica PGAdapter con il seguente comando.

    wget https://storage.googleapis.com/pgadapter-jar-releases/pgadapter.tar.gz \
    && tar -xzvf pgadapter.tar.gz

Avvia PGAdapter con il seguente comando.

    java -jar pgadapter.jar -p PROJECT_NAME -i INSTANCE_NAME -d DATABASE_NAME \
    -c CREDENTIALS_FILE_PATH \
    ADDITIONAL_OPTIONS

Sono richieste le seguenti opzioni:

-p project_name
Nome del progetto in cui è in esecuzione il database Spanner.
-i instance_name
Nome dell'istanza Spanner.
-d database_name
Nome del database a cui connettersi.

Le seguenti opzioni sono facoltative:

-r databaseRole=database_role
Ruolo del database da utilizzare per la sessione. Per maggiori informazioni, consulta la sezione Autorizzazione con PGAdapter.
-c credentials_file_path
Il percorso completo del file delle chiavi contenente le credenziali dell'account di servizio in formato JSON. Se questa opzione non è impostata, le credenziali vengono lette dal percorso specificato dalla variabile di ambiente GOOGLE_APPLICATION_CREDENTIALS.

Per scoprire come creare un account di servizio e scaricare un file della chiave in formato JSON, vedi Creazione di un service account.

Assicurati di concedere all'account di servizio credenziali sufficienti per accedere al database.

Puoi omettere questa opzione se prima ti autentichi con Google Cloud CLI con il seguente comando:

gcloud auth application-default login

Per ulteriori informazioni, vedi Configurare l'autenticazione e l'autorizzazione.

-s port
Porta su cui PGAdapter rimane in ascolto. Il valore predefinito è 5432 (la porta PostgreSQL predefinita).
-v version_number

Numero di versione di PostgreSQL da esporre al client durante la connessione. Il valore predefinito è 14,1

Alcune applicazioni e driver PostgreSQL attivano funzionalità aggiuntive a seconda di questo numero di versione. Spanner potrebbe non supportare queste funzionalità. Consulta la sezione Driver e client per un elenco completo dei client supportati.

-x

Attiva le connessioni da host diversi da localhost. Non utilizzare quando avvii PGAdapter in modalità autonoma. Utilizza solo quando avvii l'app all'interno di un container Docker.

Per impostazione predefinita, come misura di sicurezza, PGAdapter accetta connessioni solo da localhost.

L'esempio seguente avvia PGAdapter in modalità autonoma sulla porta 5432 utilizzando le credenziali dell'applicazione predefinite. 

java -jar pgadapter.jar \
-p my-project \
-i my-instance \
-d my-database \
-s 5432

Docker

Avvia PGAdapter con il seguente comando.

docker run -d -p HOST-PORT:DOCKER-PORT \
-v CREDENTIALS_FILE_PATH:/acct_credentials.json \
gcr.io/cloud-spanner-pg-adapter/pgadapter:latest \
-p PROJECT_NAME -i INSTANCE_NAME -d DATABASE_NAME  \
-c /acct_credentials.json -x OTHER_PGAdapter_OPTIONS

Oltre alle opzioni PGAdapter per specificare progetto, istanza, database e credenziali, sono necessarie le seguenti opzioni:

-p 127.0.0.1:HOST-PORT:DOCKER-PORT

Questa opzione Docker mappa la porta DOCKER-PORT all'interno del container Docker alla porta HOST-PORT all'esterno del container. DOCKER-PORT deve corrispondere alla configurazione di PGAdapter all'interno del contenitore. Il valore predefinito è 5432. HOST-PORT è la porta su cui Docker deve rimanere in ascolto all'esterno del container per le richieste di connessione. Deve sempre essere una porta disponibile su localhost.

Per ulteriori informazioni, consulta Pubblica o espone la porta (-p, --expose) nella documentazione di Docker.

-v CREDENTIALS_FILE_PATH:in_container_mount_point

Questa opzione Docker monta un volume condiviso. Mappa il percorso host all'esterno del container a un volume (punto di montaggio) all'interno del container. I percorsi host e container sono separati da due punti (:).

Questa opzione consente a PGAdapter di accedere al file delle credenziali JSON che si trova all'esterno del container. Nell'esempio precedente, l'opzione -c fa riferimento al punto di montaggio nel container. Questo esempio assegna un nome al punto di montaggio nel container /acct_credentials.json. Puoi assegnargli il nome che preferisci.

Per saperne di più, consulta VOLUME (shared filesystems) nella documentazione di Docker.

-x

Attiva le connessioni da host diversi da localhost. Questo è necessario perché la porta all'interno del container mappata alla porta host non viene visualizzata in PGAdapter come localhost.

Le seguenti opzioni sono facoltative:

-r databaseRole=database_role
Ruolo del database da utilizzare per la sessione. Per ulteriori informazioni, consulta Autorizzazione con PGAdapter.

Nell'esempio seguente, sia la porta Docker che la porta host sono impostate sulla porta predefinita 5432 del servizio di database PostgreSQL.

docker run -d -p 127.0.0.1:5432:5432 \
-v /tmp/credentials.json:/acct_credentials.json \
gcr.io/cloud-spanner-pg-adapter/pgadapter:latest \
-p my_project -i my_instance -d my_database \
-c /acct_credentials.json -x

Cloud Run

Non puoi eseguire il deployment di PGAdapter come servizio autonomo su Cloud Run, ma puoi eseguirne il deployment come proxy sidecar.

L'esecuzione di PGAdapter in un pattern sidecar è consigliata rispetto all'esecuzione come servizio separato per i seguenti motivi:
  • Evita un singolo punto di errore. L'accesso di ogni applicazione al tuo database è indipendente dalle altre, il che le rende più resilienti.
  • Il numero di istanze PGAdapter viene scalato automaticamente in modo lineare con il numero di istanze dell'applicazione.

Il repository GitHub di PGAdapter contiene diverse applicazioni di esempio funzionanti che utilizzano Cloud Run e PGAdapter come proxy sidecar per vari linguaggi di programmazione.

Il seguente file di configurazione mostra come aggiungere PGAdapter come proxy sidecar a Cloud Run:

  apiVersion: serving.knative.dev/v1
  kind: Service
  metadata:
  annotations:
    # This example uses an in-memory volume for Unix domain sockets.
    # This is a Cloud Run beta feature.
    run.googleapis.com/launch-stage: BETA
  name: pgadapter-sidecar-example
  spec:
  template:
    metadata:
      annotations:
        run.googleapis.com/execution-environment: gen1
        # This registers 'pgadapter' as a dependency of 'app' and ensures that pgadapter starts
        # before the app container.
        run.googleapis.com/container-dependencies: '{"app":["pgadapter"]}'
    spec:
      # Create an in-memory volume that can be used for Unix domain sockets.
      volumes:
        - name: sockets-dir
          emptyDir:
            # This directory contains the virtual socket files that are used to
            # communicate between your application and PGAdapter.
            sizeLimit: 50Mi
            medium: Memory
      containers:
        # This is the main application container.
        - name: app
          # Example: europe-north1-docker.pkg.dev/my-test-project/cloud-run-source-deploy/pgadapter-sidecar-example
          image: MY-REGION.pkg.dev/MY-PROJECT/cloud-run-source-deploy/pgadapter-sidecar-example
          # The PGADAPTER_HOST variable is set to point to /sockets, which is the shared in-memory
          # volume that is used for Unix domain sockets.
          env:
            - name: SPANNER_PROJECT
              value: my-project
            - name: SPANNER_INSTANCE
              value: my-instance
            - name: SPANNER_DATABASE
              value: my-database
            - name: PGADAPTER_HOST
              value: /sockets
            - name: PGADAPTER_PORT
              value: "5432"
          ports:
            - containerPort: 8080
          volumeMounts:
            - mountPath: /sockets
              name: sockets-dir
        # This is the PGAdapter sidecar container.
        - name: pgadapter
          image: gcr.io/cloud-spanner-pg-adapter/pgadapter
          volumeMounts:
            - mountPath: /sockets
              name: sockets-dir
          args:
            - -dir /sockets
            - -x
          # Add a startup probe that checks that PGAdapter is listening on port 5432.
          startupProbe:
            initialDelaySeconds: 10
            timeoutSeconds: 10
            periodSeconds: 10
            failureThreshold: 3
            tcpSocket:
              port: 5432

Proxy sidecar

Puoi utilizzare PGAdapter come proxy sidecar, ad esempio, in un cluster Kubernetes. I container sidecar di Kubernetes vengono eseguiti in parallelo con il container principale nel pod.

L'esecuzione di PGAdapter in un pattern sidecar è consigliata rispetto all'esecuzione come servizio separato per i seguenti motivi:

  • Evita un singolo punto di errore. L'accesso di ogni applicazione al tuo database è indipendente dalle altre, il che le rende più resilienti.
  • Poiché PGAdapter consuma risorse in relazione lineare all'utilizzo, questo pattern ti consente di definire e richiedere in modo più preciso le risorse in modo che corrispondano alle tue applicazioni man mano che vengono scalate.

Il seguente file di configurazione mostra come aggiungere PGAdapter come proxy sidecar al cluster Kubernetes:

containers:
- name: pgadapter
image: gcr.io/cloud-spanner-pg-adapter/pgadapter
ports:
  - containerPort: 5432
args:
  - "-p my-project"
  - "-i my-instance"
  - "-d my-database"
  - "-x"
resources:
  requests:
    # PGAdapter's memory use scales linearly with the number of active
    # connections. Fewer open connections will use less memory. Adjust
    # this value based on your application's requirements.
    memory: "512Mi"
    # PGAdapter's CPU use scales linearly with the amount of IO between
    # the database and the application. Adjust this value based on your
    # application's requirements.
    cpu: "1"

Il repository GitHub PGAdapter contiene una guida passo passo e un'applicazione di esempio. Questo esempio include le istruzioni per l'utilizzo di Workload Identity Federation for GKE con PGAdapter.

Java in-process

Crea e avvia un'istanza PGAdapter con il tuo codice Java. Questa è la configurazione consigliata per le applicazioni Java.

Se utilizzi un account di servizio per l'autenticazione, assicurati che la variabile di ambiente GOOGLE_APPLICATION_CREDENTIALS sia impostata sul percorso del file delle credenziali.

  1. Aggiungi google-cloud-spanner-pgadapter come dipendenza al tuo progetto. Per maggiori dettagli, vedi Scaricare PGAdapter.
  2. Crea un server utilizzando la classe com.google.cloud.spanner.pgadapter.ProxyServer.
    3. /**
* Starts PGAdapter in-process and returns a reference to the server. Use this reference to
* gracefully shut down the server when your application shuts down.
*
* @param project the Google Cloud project that PGAdapter should connect to
* @param instance the Spanner instance that PGAdapter should connect to
* @param credentialsFile the full path of a credentials file that PGAdapter should use, or 
*     null if PGAdapter should use the application default credentials
*/
static Server startPGAdapter(String project, String instance, String credentialsFile) {
OptionsMetadata.Builder builder =
    OptionsMetadata.newBuilder()
        .setProject(project)
        .setInstance(instance)
        // Start PGAdapter on any available port.
        .setPort(0);
if (credentialsFile != null) {
  builder.setCredentialsFile(credentialsFile);
}
ProxyServer server = new ProxyServer(builder.build());
server.startServer();
server.awaitRunning();

return new PGAdapter(server);
}

Il repository GitHub PGAdapter contiene un'applicazione di esempio completa.

Indicazioni per l'allocazione delle risorse per il proxy sidecar PGAdapter

Le seguenti linee guida possono aiutarti a configurare le risorse di CPU e memoria per il proxy sidecar PGAdapter. I valori ottimali variano a seconda del tuo carico di lavoro specifico.

Memoria

Poiché PGAdapter non memorizza nella cache molti dati, richiede memoria per convertire i risultati delle query dal formato gRPC di Spanner al formato del protocollo di trasferimento PostgreSQL. Ciò è particolarmente pertinente per i carichi di lavoro con colonne binarie di grandi dimensioni perché Spanner e PostgreSQL gestiscono questi tipi di dati in modo diverso.

Per determinare la quantità di memoria da allocare, utilizza la seguente formula per l'allocazione della memoria, dove <var>number of concurrent connections</var> è il numero di connessioni simultanee gestite dalla tua applicazione:

384 MB + (2 MB * number of concurrent connections)

Ad esempio, se la tua applicazione gestisce 200 connessioni simultanee, alloca circa 784 MB di memoria:

384 MB + (2 MB * 200) = 784 MB

Inizia con questa allocazione di memoria di base. Monitora il suo utilizzo in condizioni di carico realistiche per perfezionare il valore in base alle tue esigenze specifiche.

CPU

PGAdapter non utilizza molta CPU. Questo perché il suo ruolo principale è quello di fungere da proxy pass-through. Tuttavia, l'utilizzo della CPU aumenta con la quantità di dati inviati e ricevuti.

Quando allochi la CPU, prendi in considerazione i seguenti fattori:

  • Carico di lavoro: le applicazioni che eseguono query che restituiscono grandi quantità di dati richiedono più potenza della CPU per connessione rispetto a quelle che restituiscono solo poche righe e colonne.
  • Pattern di accesso all'applicazione:se la tua applicazione accede a Spanner in modo sincrono, è inattiva mentre attende i dati dal proxy. In questo caso, è meno probabile che l'applicazione e il proxy competano per le risorse della CPU.

Inizia con un'allocazione della CPU di base. Monitora il suo utilizzo in condizioni di carico realistiche per perfezionare il valore in base alle tue esigenze specifiche.

Passaggi successivi