Questo tutorial descrive come eseguire la migrazione delle app web Node.js in esecuzione su Heroku a Cloud Run su Google Cloud. Questo tutorial è destinato agli architetti e ai proprietari di prodotti che vogliono eseguire la migrazione delle loro app da Heroku ai servizi gestiti su Google Cloud.
Cloud Run è una piattaforma di calcolo gestita che consente di eseguire container stateless richiamabili tramite richieste HTTP. È basato su Knative open source, che consente la portabilità tra piattaforme e supporta i flussi di lavoro dei container e gli standard per il deployment continuo. La piattaforma Cloud Run integrati con la suite di prodotti Google Cloud, permettendoti di per progettare e sviluppare app portabili, scalabili e resilienti.
In questo tutorial imparerai a eseguire la migrazione a Google Cloud di un'app scritta in Node.js e che utilizza Heroku Postgres come servizio di supporto su Heroku. L'app web è containerizzata e ospitata Cloud Run e utilizza Cloud SQL per PostgreSQL come persistenza livello di sicurezza.
Nel tutorial utilizzi un'app semplice chiamata Tasks che ti consente di visualizzare e creare attività di machine learning. Queste attività sono archiviate in Heroku Postgres nel deployment attuale sull'app su Heroku.
Questo tutorial presuppone che tu abbia familiarità con le funzionalità di base di Heroku e di avere un account Heroku (o avere accesso a uno di questi). Inoltre, si presume che tu abbia familiarità con Cloud Run, Cloud SQL, Docker e Node.js.
Obiettivi
- Crea un'immagine Docker per eseguire il deployment dell'app in Cloud Run.
- Crea un'istanza Cloud SQL per PostgreSQL da utilizzare come backend dopo la migrazione a Google Cloud.
- Esamina il codice Node.js per capire in che modo Cloud Run si connette a Cloud SQL e per vedere le eventuali modifiche al codice necessarie per eseguire la migrazione a Cloud Run da Heroku.
- Esegui la migrazione dei dati da Heroku Postgres a Cloud SQL per PostgreSQL.
- Eseguire il deployment dell'app in Cloud Run.
- Testa l'app di cui hai eseguito il deployment.
Costi
In questo documento utilizzi i seguenti componenti fatturabili di Google Cloud:
Per generare una stima dei costi basata sull'utilizzo previsto,
utilizza il Calcolatore prezzi.
Potresti anche ricevere un addebito per le risorse che usi su Heroku.
Prima di iniziare
- Sign in to your Google Cloud account. If you're new to Google Cloud, create an account to evaluate how our products perform in real-world scenarios. New customers also get $300 in free credits to run, test, and deploy workloads.
-
In the Google Cloud console, on the project selector page, select or create a Google Cloud project.
-
Make sure that billing is enabled for your Google Cloud project.
-
Enable the Cloud SQL, Cloud Build, Cloud Run, Container Registry, Service Networking, Serverless VPC Access APIs.
-
Make sure that you have the following role or roles on the project: Cloud Run > Cloud Run Admin, Cloud Storage > Storage Admin, Cloud SQL > Cloud SQL Admin, Compute Engine > Compute Network Admin, Resource Manager > Project IAM Admin, Cloud Build > Cloud Build Editor, Serverless VPC Access > Serverless VPC Access Admin, Logging > Logs Viewer, Service Accounts > Service Account Admin, Service Accounts > Service Account User, and Service Usage > Service Usage Consumer
Check for the roles
-
In the Google Cloud console, go to the IAM page.
Go to IAM - Select the project.
-
In the Principal column, find all rows that identify you or a group that you're included in. To learn which groups you're included in, contact your administrator.
- For all rows that specify or include you, check the Role colunn to see whether the list of roles includes the required roles.
Grant the roles
-
In the Google Cloud console, go to the IAM page.
Vai a IAM - Seleziona il progetto.
- Fai clic su Concedi l'accesso.
-
Nel campo Nuove entità, inserisci il tuo identificatore utente. In genere si tratta dell'indirizzo email di un Account Google.
- Nell'elenco Seleziona un ruolo, seleziona un ruolo.
- Per concedere altri ruoli, fai clic su Aggiungi un altro ruolo e aggiungi ogni altro ruolo.
- Fai clic su Salva.
-
-
In the Google Cloud console, on the project selector page, select or create a Google Cloud project.
-
Make sure that billing is enabled for your Google Cloud project.
-
Enable the Cloud SQL, Cloud Build, Cloud Run, Container Registry, Service Networking, Serverless VPC Access APIs.
-
Make sure that you have the following role or roles on the project: Cloud Run > Cloud Run Admin, Cloud Storage > Storage Admin, Cloud SQL > Cloud SQL Admin, Compute Engine > Compute Network Admin, Resource Manager > Project IAM Admin, Cloud Build > Cloud Build Editor, Serverless VPC Access > Serverless VPC Access Admin, Logging > Logs Viewer, Service Accounts > Service Account Admin, Service Accounts > Service Account User, and Service Usage > Service Usage Consumer
Check for the roles
-
In the Google Cloud console, go to the IAM page.
Go to IAM - Select the project.
-
In the Principal column, find all rows that identify you or a group that you're included in. To learn which groups you're included in, contact your administrator.
- For all rows that specify or include you, check the Role colunn to see whether the list of roles includes the required roles.
Grant the roles
-
In the Google Cloud console, go to the IAM page.
Vai a IAM - Seleziona il progetto.
- Fai clic su Concedi l'accesso.
-
Nel campo Nuove entità, inserisci il tuo identificatore utente. In genere si tratta dell'indirizzo email di un Account Google.
- Nell'elenco Seleziona un ruolo, seleziona un ruolo.
- Per concedere altri ruoli, fai clic su Aggiungi un altro ruolo e aggiungi ogni altro ruolo.
- Fai clic su Salva.
-
Configurazione dell'ambiente
Apri Cloud Shell.
In Cloud Shell, imposta le variabili di ambiente e i valori predefiniti per Google Cloud CLI usata in questo tutorial.
gcloud config set project PROJECT_ID gcloud config set run/region us-central1
Sostituisci
PROJECT_ID
con l'ID progetto.
Architettura
Le seguenti figure illustrano l'architettura dell'app web su Heroku (così com'è) e il suo layout architettonico su Google Cloud (che dovrai creare).
L'app Tasks attualmente di cui è stato eseguito il deployment in Heroku è composta da uno o più dyno web. I dyno web sono in grado di ricevere e rispondere al traffico HTTP, a differenza dei dyno worker, che sono più adatti per i job in background e le attività a tempo. L'app viene pubblicata una pagina di indice che mostra le attività archiviate in un database Postgres, la libreria dei modelli Mustache per Node.js.
Puoi accedere all'app da un URL HTTPS. Un percorso /tasks
in corrispondenza di quell'URL ti consente
creare nuove attività.
Su Google Cloud, Cloud Run viene utilizzato come ambiente per il deployment dell'app Tasks. Cloud Run è progettato per eseguire e container stateless basati su richieste. È adatta quando hai bisogno di per supportare app containerizzate che scalano automaticamente e inoltre scalano zero quando non gestiscono traffico.
Mappatura dei componenti utilizzati in Heroku in Google Cloud
La tabella seguente mappa i componenti della piattaforma Heroku a Google Cloud. Questo mapping ti aiuta a tradurre l'architettura descritta in questo tutorial da Da Heroku a Google Cloud.
Componente | Piattaforma Heroku | Google Cloud |
---|---|---|
Container | Dynos: Heroku usa il modello container per creare e scalare le app Heroku. Questi sistemi Linux I container sono chiamati dynos e possono scalare fino a un numero da te specificato per supportare le richieste di risorse per la tua app Heroku. Puoi scegliere tra un intervallo di tipi dinamo in base alla memoria e ai requisiti di CPU dell'app. | Container Cloud Run: Google Cloud supporta l'esecuzione di carichi di lavoro containerizzati in container stateless che possono essere eseguiti in un ambiente completamente gestito o in Google Kubernetes Engine (GKE) cluster. |
App web | App Heroku: le Dyno sono gli elementi costitutivi delle app Heroku. Le app in genere sono costituite da uno o più tipi di dyno, in genere una combinazione di dyno web e worker. | Servizio Cloud Run: un'app web può essere modellata come servizio Cloud Run. Ogni servizio riceve il proprio protocollo HTTPS ed è in grado di fare automaticamente lo scale up o lo scale down da 0 a N in base il traffico verso l'endpoint di servizio. |
Database | Heroku Postgres è il database as a Service (DaaS) di Heroku basato su PostgreSQL. | Cloud SQL è un servizio di database gestito per i database relazionali su Google Cloud. |
Eseguire il deployment dell'app web di esempio Tasks su Heroku
Le sezioni seguenti mostrano come configurare l'interfaccia a riga di comando (CLI) per Heroku, clonare il repository di origine GitHub ed eseguire il deployment dell'app su Heroku.
Configura l'interfaccia a riga di comando per Heroku
Questo tutorial esegue l'interfaccia a riga di comando Heroku in Cloud Shell e deve eseguire l'autenticazione utilizzando una chiave API Heroku. Durante l'esecuzione in Cloud Shell, l'interfaccia a riga di comando Heroku non può eseguire l'autenticazione utilizzando una password o un'autenticazione basata sul web.
In alternativa, se esegui l'esempio su un terminale locale, puoi utilizzare qualsiasi metodo di autenticazione dell'interfaccia a riga di comando Heroku. Quando esegui il tutorial su un terminale locale, devi installare anche Google Cloud CLI, git e Docker.
Accedi alla console web per Heroku, quindi copia il valore della chiave API dalla pagina delle impostazioni dell'account.
In Cloud Shell, installa l'interfaccia a riga di comando Heroku
In Cloud Shell, autentica l'interfaccia a riga di comando Heroku. Quando viene richiesto il password, inserisci il valore della chiave API che hai copiato da Heroku della console Google Cloud, non la password che utilizzi per accedervi.
heroku login --interactive
clona il repository del codice sorgente
In Cloud Shell, clona il repository GitHub dell'app Tasks di esempio:
git clone https://github.com/GoogleCloudPlatform/migrate-webapp-heroku-to-cloudrun-node.git
Passa alla directory creata clonando il repository:
cd migrate-webapp-heroku-to-cloudrun-node
La directory contiene i seguenti file:
- Uno script Node.js denominato
index.js
con il codice per i percorsi pubblicati dall'app web. package.json
epackage-lock.json
file che e delineare le dipendenze dell'app web. Devi installare queste dipendenze per eseguire l'app.- Un file
Procfile
che specifica il comando eseguito dall'app all'avvio. Puoi creare un fileProcfile
per eseguire il deployment dell'app su Heroku. - Una directory
views
, con i contenuti HTML pubblicati dal web app sulla barra "/" percorso. - Un file
.gitignore
.
- Uno script Node.js denominato
Eseguire il deployment di un'app su Heroku
In Cloud Shell, crea un'app Heroku:
heroku create
Prendi nota del nome creato per l'app. Ti servirà questo valore nel passaggio successivo.
Crea una variabile di ambiente per il nome dell'app Heroku:
export APP_NAME=APP_NAME
Sostituisci
APP_NAME
con il nome dell'app restituito dal comandoheroku create
.Aggiungi il componente aggiuntivo Heroku Postgres per eseguire il provisioning di un database PostgreSQL:
heroku addons:create heroku-postgresql:mini
Assicurati che il componente aggiuntivo sia stato aggiunto:
heroku addons
Se il componente aggiuntivo Postgres è stato aggiunto correttamente, viene visualizzato un messaggio simile al seguente:
Add-on Plan Price State ----------------- ----- -------- ----- heroku-postgresql mini 5$/month created
Esegui il deployment dell'app su Heroku:
git push heroku master
Esegui il seguente comando per confermare il valore di DATABASE_URL.
heroku config
Prendi nota del valore recuperato per DATABASE_URL. Questo valore è necessario in al passaggio successivo.
Esegui un container Docker.
docker run -it --rm postgres psql "DATABASE_URL"
Sostituisci
DATABASE_URL
con l'URL di Heroku Postgres che hai notato nel passaggio precedente.Nel container Docker, crea la tabella
TASKS
utilizzando il metodo seguente comando:CREATE TABLE TASKS (DESCRIPTION TEXT NOT NULL);
Esci dal contenitore:
exit
In Cloud Shell, ottieni l'URL web per la tua app Heroku eseguendo il seguente comando:
heroku info
Apri l'URL web in una finestra del browser. L'app ha il seguente screenshot (anche se nella tua versione non sono elencate le attività):
Crea attività di esempio nella tua app dal browser. Assicurati che le attività vengano recuperate dal database e siano visibili nell'interfaccia utente.
Preparazione del codice dell'app web per la migrazione a Cloud Run
Questa sezione descrive i passaggi da completare per preparare la tua app web per il deployment in Cloud Run.
Crea e pubblica il container Docker in Container Registry
Hai bisogno di un'immagine Docker per creare il container dell'app in modo che possa essere eseguito in Cloud Run. Puoi creare il container manualmente o utilizzando Buildpack.
Crea il container manualmente
In Cloud Shell, crea un Dockerfile nella directory creata con il cloning del repository per questo tutorial:
cat <<"EOF" > Dockerfile # Use the official Node image. # https://hub.docker.com/_/node FROM node:10-alpine # Create and change to the app directory. WORKDIR /app # Copying this separately prevents re-running npm install on every code change. COPY package*.json ./ RUN npm install # Copy local code to the container image. COPY . /app # Configure and document the service HTTP port. ENV PORT 8080 EXPOSE $PORT # Run the web service on container startup. CMD ["npm", "start"] EOF
Crea il tuo container con Cloud Build e pubblica l'immagine Container Registry:
gcloud builds submit --tag gcr.io/PROJECT_ID/APP_NAME:1 \ --gcs-log-dir=gs://PROJECT_ID_cloudbuild
Crea una variabile di ambiente in cui inserire il nome dell'immagine Docker che hai creato:
export IMAGE_NAME="gcr.io/PROJECT_ID/APP_NAME:1"
Creazione di container con Buildpacks
In Cloud Shell, installa il interfaccia a riga di comando pacchetto.
Imposta l'interfaccia a riga di comando del pacchetto in modo da utilizzare il builder Heroku per impostazione predefinita:
pack config default-builder heroku/buildpacks:22
Crea una variabile di ambiente in cui inserire il nome dell'immagine Docker:
export IMAGE_NAME=gcr.io/PROJECT_ID/APP_NAME:1
Crea l'immagine utilizzando il comando
pack
ed esegui il push o pubblica l'immagine in Container Registry:pack build --publish $IMAGE_NAME
Crea un'istanza Cloud SQL per PostgreSQL
Creerai un'istanza Cloud SQL per PostgreSQL da utilizzare come backend per l'app web. In questo tutorial, PostgreSQL è l'app di esempio più adatta da eseguire su Heroku, che utilizza un database Postgres come backend. Ai fini di questa app, la migrazione a Cloud SQL per PostgreSQL da un servizio PostgreSQL gestito non richiede modifiche allo schema.
Prepara la rete per Cloud SQL con un indirizzo IP privato.
gcloud compute addresses create google-managed-services-default \ --global \ --purpose=VPC_PEERING \ --prefix-length=16 \ --description="peering range for CloudSQL Private Service Access" \ --network=default gcloud services vpc-peerings connect \ --service=servicenetworking.googleapis.com \ --ranges=google-managed-services-default \ --network=default \ --project=PROJECT_ID
Crea una variabile di ambiente denominata
CLOUDSQL_DB_NAME
per contenere il nome dell'istanza del database che crei nel passaggio successivo:export CLOUDSQL_DB_NAME=tasks-db
Crea il database:
gcloud sql instances create $CLOUDSQL_DB_NAME \ --cpu=1 \ --memory=4352Mib \ --database-version=POSTGRES_15 \ --region=us-central1 \ --network default \ --no-assign-ip
L'inizializzazione dell'istanza potrebbe richiedere alcuni minuti.
Imposta una password per l'utente Postgres:
gcloud sql users set-password postgres \ --instance=$CLOUDSQL_DB_NAME \ --password=POSTGRES_PASSWORD
Sostituisci
POSTGRES_PASSWORD
con la password che vuoi utilizzare per il database Postgres.
Importa i dati in Cloud SQL da Heroku Postgres
Esistono più pattern di migrazione che puoi utilizzare per eseguire la migrazione dei dati in in Cloud SQL. In genere, l'approccio migliore che richiede poca o nessun tempo di inattività è configurare Cloud SQL come replica sul database della migrazione, rendendo Cloud SQL l'istanza principale migrazione. Heroku Postgres non supporta le repliche esterne (follower), quindi in questo tutorial utilizzerai strumenti open source per eseguire la migrazione dello schema dell'app.
Per l'app Tasks in questo tutorial, utilizzerai l'utilità pg_dump per esportare i dati da Heroku Postgres in un bucket Cloud Storage e poi importarli in Cloud SQL. Questa utilità può trasferire dati tra versioni omogenee o quando la versione del database di destinazione è più recente rispetto al database di origine.
In Cloud Shell, ottieni le credenziali del database per il database Heroku Postgres collegato all'app di esempio. Queste credenziali ti serviranno nel passaggio successivo.
heroku pg:credentials:url
Questo comando restituisce la stringa di informazioni di connessione e l'URL di connessione per la tua applicazione. La stringa delle informazioni di connessione ha il seguente formato:
"dbname=DATABASE_NAME host=FQDN port=5432 user=USER_NAME password=PASSWORD_STRING sslmode=require"
Nel passaggio successivo avrai bisogno dei valori mostrati nella stringa di connessione.
Per un esempio di valore FQDN (nome di dominio completo) in una stringa di informazioni di connessione, consulta la documentazione di Heroku.
Imposta le variabili di ambiente per contenere i valori Heroku che utilizzi nei passaggi successivi:
export HEROKU_PG_DBNAME=DATABASE_NAME export HEROKU_PG_HOST=FQDN export HEROKU_PG_USER=USER_NAME export HEROKU_PG_PASSWORD=PASSWORD_STRING
Sostituisci quanto segue:
DATABASE_NAME
: il nome del database visualizzato in stringa di informazioni.FQDN
: il nome di dominio completo mostrato in stringa di informazioni.USER_NAME
: il nome utente visualizzato in stringa di informazioni.PASSWORD_STRING
: la stringa della password visualizzata in stringa di informazioni.
Crea un backup in formato SQL del tuo database Heroku Postgres:
docker run \ -it --rm \ -e PGPASSWORD=$HEROKU_PG_PASSWORD \ -v $(pwd):/tmp \ --entrypoint "pg_dump" \ postgres \ -Fp \ --no-acl \ --no-owner \ -h $HEROKU_PG_HOST \ -U $HEROKU_PG_USER \ $HEROKU_PG_DBNAME > herokudump.sql
Crea una variabile di ambiente che contenga il nome del tuo Bucket Cloud Storage:
export PG_BACKUP_BUCKET=gs://PROJECT_ID-pg-backup-bucket
Crea un bucket Cloud Storage:
gcloud storage buckets create $PG_BACKUP_BUCKET \ --location=us-central1 \ --public-access-prevention \ --uniform-bucket-level-access
Carica il file SQL in questo bucket:
gcloud storage cp herokudump.sql $PG_BACKUP_BUCKET/herokudump.sql
Autorizza la tua istanza Cloud SQL con ruoli necessari per importare il file SQL dal bucket Cloud Storage:
gcloud projects add-iam-policy-binding PROJECT_ID \ --member=serviceAccount:$(gcloud sql instances describe $CLOUDSQL_DB_NAME --format='get("serviceAccountEmailAddress")') \ --role=roles/storage.objectAdmin gcloud projects add-iam-policy-binding PROJECT_ID \ --member=serviceAccount:$(gcloud sql instances describe $CLOUDSQL_DB_NAME --format='get("serviceAccountEmailAddress")') \ --role=roles/cloudsql.editor
Importa il file SQL nell'istanza Cloud SQL:
gcloud sql import sql $CLOUDSQL_DB_NAME $PG_BACKUP_BUCKET/herokudump.sql \ --database=postgres \ --user=postgres
Quando richiesto
do you want to continue (y/n)
, inserisci "y".
In che modo Cloud Run accede al database Cloud SQL
Proprio come l'app web di cui è stato eseguito il deployment in Heroku deve connettersi all'istanza gestita di Heroku Postgres, Cloud Run richiede l'accesso a Cloud SQL per poter leggere e scrivere dati.
Cloud Run comunica con Cloud SQL utilizzando il proxy Cloud SQL che viene attivato e configurato automaticamente quando il deployment del container in Cloud Run. Non è necessario che il database indirizzi IP esterni approvati perché tutte le comunicazioni riceve dal proxy tramite TCP sicuro.
Il codice deve invocare le operazioni del database (ad esempio il recupero dei dati dal database o la scrittura al suo interno) chiamando il proxy su una socket UNIX.
Poiché questa app web è scritta in Node.js, utilizzi la libreria pg-connection-string
per analizzare un URL del database e creare un oggetto config
. Il vantaggio di questo approccio è che semplifica la connessione al database di backend su Heroku e Cloud Run.
Nel passaggio successivo, passerai l'URL del database come variabile di ambiente quando il deployment dell'app web.
Esegui il deployment dell'app di esempio in Cloud Run
In Cloud Shell, configura l'accesso serverless VPC. per consentire il traffico privato da Cloud Run a Cloud SQL:
gcloud compute networks subnets create serverless-connector-subnet \ --network=default \ --range=10.0.0.0/28 \ --region=us-central1 gcloud compute networks vpc-access connectors create serverless-connector \ --region=us-central1 \ --subnet=serverless-connector-subnet
In Cloud Shell, crea una variabile di ambiente che contenga il nome della connessione dell'istanza Cloud SQL che hai creato:
export DB_CONN_NAME=$(gcloud sql instances describe $CLOUDSQL_DB_NAME --format='value(connectionName)')
Crea una variabile di ambiente denominata
DATABASE_URL
per mantenere la connessione per la connessione al proxy Cloud SQL tramite una porta UNIX.export DATABASE_URL="socket:/cloudsql/${DB_CONN_NAME}?db=postgres&user=postgres&password=POSTGRES_PASSWORD"
Crea un account di servizio per Cloud Run con un ruolo IAM per la connessione al database:
gcloud iam service-accounts create sa-run-db-client gcloud projects add-iam-policy-binding PROJECT_ID \ --member=serviceAccount:sa-run-db-client@PROJECT_ID.iam.gserviceaccount.com \ --role=roles/cloudsql.client
Esegui il deployment dell'app web in Cloud Run:
gcloud run deploy tasksapp-PROJECT_ID \ --image=$IMAGE_NAME \ --service-account=sa-run-db-client@PROJECT_ID.iam.gserviceaccount.com \ --set-env-vars=DATABASE_URL=$DATABASE_URL \ --add-cloudsql-instances $DB_CONN_NAME \ --vpc-connector serverless-connector \ --allow-unauthenticated
Il comando precedente collega anche il container Cloud Run a all'istanza del database Cloud SQL che hai creato. Il comando imposta una variabile di ambiente per Cloud Run in modo che punti alla stringa
DATABASE_URL
creata nel passaggio precedente.
Test dell'applicazione
In Cloud Shell, ottieni l'URL in cui Cloud Run gestisce il traffico:
gcloud run services list
Puoi anche esaminare il servizio Cloud Run nella console Google Cloud.
Assicurati che la tua app web accetti le richieste HTTP andando all'URL del servizio Cloud Run.
Cloud Run crea o avvia un nuovo contenitore quando viene inviata una richiesta HTTP all'endpoint di servizio e se non è già in esecuzione un contenitore. Ciò significa che la richiesta che causa l'avvio di un nuovo contenitore potrebbe richiedere un po' più di tempo per essere eseguita. Dato questo tempo aggiuntivo, tieni conto del numero di richieste simultanee che la tua app può supportare e di eventuali requisiti di memoria specifici.
Per questa app vengono utilizzate le impostazioni di contemporaneità predefinite, che consentono un servizio Cloud Run per gestire 80 richieste contemporaneamente da un singolo containerizzato.
Esegui la pulizia
Per evitare che al tuo account Google Cloud vengano addebitati costi relativi alle risorse usato in questo tutorial. Ti consigliamo inoltre di eliminare le risorse create in Heroku per questo tutorial.
Elimina il progetto Google Cloud
- In the Google Cloud console, go to the Manage resources page.
- In the project list, select the project that you want to delete, and then click Delete.
- In the dialog, type the project ID, and then click Shut down to delete the project.
Elimina l'app Heroku
Per eliminare l'app di esempio di cui hai eseguito il deployment in Heroku e il plug-in PostgreSQL associato, esegui il seguente comando:
heroku apps:destroy -a APP_NAME
Passaggi successivi
- Informazioni su dell'importazione dei dati in Cloud SQL.
- Consulta la documentazione di Cloud Run.