Configurer Cloud Endpoints gRPC pour Cloud Run avec ESPv2

OpenAPI | gRPC

Cette page vous explique comment configurer Cloud Endpoints pour Cloud Run avec un backend gRPC. Cloud Endpoints utilise le proxy Extensible Service Proxy V2 (ESPv2) en guise de passerelle API. Afin d'assurer la gestion des API par Cloud Run, vous devez déployer le conteneur ESPv2 prédéfini sur Cloud Run. Vous pouvez ensuite sécuriser vos services à l'aide des rôles IAM pour Cloud Run afin qu'ESPv2 puisse les appeler.

Une fois la configuration finalisée, ESPv2 peut intercepter toutes les requêtes adressées à vos services avant de les appeler, et effectuer les vérifications nécessaires, telles que l'authentification. Lorsque le service répond, ESPv2 rassemble et consigne les données de télémétrie, comme illustré par la figure ci-dessous. Vous pouvez afficher les métriques de votre service sur la page Endpoints > Services de la console Google Cloud.

Architecture Endpoints

Pour obtenir une présentation de Cloud Endpoints, consultez les pages À propos de Cloud Endpoints et Présentation de l'architecture Cloud Endpoints.

Migrer vers ESPv2

Les versions précédentes de Cloud Endpoints n'acceptaient pas gRPC sur Cloud Run avec ESP. Pour utiliser cette fonctionnalité, effectuez la migration vers Extensible Service Proxy V2.

Liste de tâches

Tout au long du tutoriel, reportez-vous à la liste de tâches présentée ci-dessous. La finalisation du tutoriel suppose de réaliser l'intégralité de ces tâches.

Créez un projet Google Cloud et, si vous n'avez pas déployé votre propre environnement Cloud Run, déployez un exemple de service gRPC backend. Consultez la section Avant de commencer.
Réservez un nom d'hôte Cloud Run pour le service ESPv2. Consultez la page Réserver un nom d'hôte Cloud Run.
Créez un document de configuration de l'API gRPC décrivant votre API, puis configurez les routes vers votre instance Cloud Run. Consultez la section Configurer Endpoints.
Déployez le document de configuration de l'API gRPC pour créer un service géré. Consultez la section Déployer la configuration Endpoints.
Créez une image ESPv2 pour Docker avec votre configuration de service Endpoints. Consultez la section Créer une nouvelle image ESPv2.
Déployez le conteneur ESPv2 dans Cloud Run. Accordez ensuite à ESPv2 l'autorisation IAM (Identity and Access Management) d'appeler votre service. Consultez la section Déployer le conteneur ESPv2.
Appelez un service. Consultez la section Envoyer des requêtes à l'API.
Suivez l'activité de vos services. Consultez la section Suivre l'activité de l'API.
Faites le nécessaire pour éviter que des frais ne soient facturés sur votre compte Google Cloud. Consultez la section Effectuer un nettoyage.

Coûts

Dans ce document, vous utilisez les composants facturables suivants de Google Cloud :

Obtenez une estimation des coûts en fonction de votre utilisation prévue à l'aide du simulateur de coût. Les nouveaux utilisateurs de Google Cloud peuvent bénéficier d'un essai gratuit.

Une fois que vous avez terminé les tâches décrites dans ce document, vous pouvez éviter de continuer à payer des frais en supprimant les ressources que vous avez créées. Pour en savoir plus, consultez la section Effectuer un nettoyage.

Avant de commencer

Avant de vous lancer, procédez comme suit :

Dans la console Google Cloud, accédez à la page Gérer les ressources et créez un projet.
Accéder à la page Gérer les ressources
Assurez-vous que la facturation est activée pour votre projet.
Découvrir comment activer la facturation
Notez l'ID du projet, car vous en aurez besoin ultérieurement. Sur le reste de cette page, cet ID est appelé ESP_PROJECT_ID.
Notez le numéro de projet, car vous en aurez besoin ultérieurement. Sur le reste de cette page, ce numéro est appelé ESP_PROJECT_NUMBER.
Téléchargez et installez la Google Cloud CLI.
Télécharger la gcloud CLI
Suivez les étapes du guide de démarrage rapide de gRPC Python pour installer gRPC et les outils gRPC.
Déployez l'exemple de service Cloud Run gRPC backend python-grpc-bookstore-server pour l'utiliser avec ce tutoriel. Le service gRPC utilise l'image de conteneur suivante :

gcr.io/endpointsv2/python-grpc-bookstore-server:2

Suivez les étapes du Guide de démarrage rapide : déployer un exemple de conteneur prédéfini pour déployer le service. Veillez à remplacer l'image de conteneur spécifiée dans ce guide de démarrage rapide par gcr.io/endpointsv2/python-grpc-bookstore-server:2.

Notez la région et l'identifiant du projet dans lequel votre service est déployé. Sur le reste de cette page, cet ID est appelé BACKEND_PROJECT_ID. Le nom désignant le service Cloud Run déployé est BACKEND_SERVICE_NAME. Son nom d'hôte Cloud Run est BACKEND_HOST_NAME.

Réserver un nom d'hôte Cloud Run

Vous devez réserver un nom d'hôte Cloud Run pour le service ESPv2 afin de configure le document OpenAPI ou la configuration du service gRPC. Pour réserver un nom d'hôte, vous devez déployer un exemple de conteneur dans Cloud Run. Vous deploy par la suite le conteneur ESPv2 sur le même service Cloud Run.

Assurez-vous que gcloud CLI est autorisé à accéder à vos données et services.
1. Connectez-vous.
```
gcloud auth login
```
2. Dans le nouvel onglet de navigateur qui s'ouvre, choisissez un compte disposant du rôle Éditeur ou Propriétaire dans le projet Google Cloud que vous avez créé pour déployer ESPv2 dans Cloud Run.

Définissez la région.

gcloud config set run/region us-central1

Déployez l'exemple d'image gcr.io/cloudrun/hello dans Cloud Run. Remplacez CLOUD_RUN_SERVICE_NAME par le nom que vous souhaitez utiliser pour le service.

gcloud run deploy CLOUD_RUN_SERVICE_NAME \
    --image="gcr.io/cloudrun/hello" \
    --allow-unauthenticated \
    --platform managed \
    --project=ESP_PROJECT_ID

Si elle réussit, la commande affiche un message semblable à celui-ci :

Service [CLOUD_RUN_SERVICE_NAME] revision [CLOUD_RUN_SERVICE_NAME-REVISION_NUM] has been deployed and is serving traffic at CLOUD_RUN_SERVICE_URL

Par exemple, si vous définissez CLOUD_RUN_SERVICE_NAME sur gateway :

Service [gateway] revision [gateway-00001] has been deployed and is serving traffic at https://gateway-12345-uc.a.run.app

Dans cet exemple, https://gateway-12345-uc.a.run.app correspond à CLOUD_RUN_SERVICE_URL et gateway-12345-uc.a.run.app à CLOUD_RUN_HOSTNAME.

Notez CLOUD_RUN_SERVICE_NAME et CLOUD_RUN_HOSTNAME. Vous déploierez par la suite ESPv2 sur le service Cloud Run CLOUD_RUN_SERVICE_NAME. Spécifiez CLOUD_RUN_HOSTNAME dans le champ host du document OpenAPI.

Configurer Endpoints

L'exemple bookstore-grpc contient les fichiers que vous devez copier localement puis configurer.

Créez un fichier de descripteur protobuf autonome à partir de votre fichier de service .proto :
1. Enregistrez dans votre répertoire de travail actuel une copie du fichier bookstore.proto à partir de l'exemple de dépôt. Ce fichier définit l'API du service Bookstore.
2. Créez le répertoire suivant dans votre répertoire de travail : mkdir generated_pb2
3. Créez le fichier descripteur api_descriptor.pb à l'aide du compilateur de tampons de protocole protoc. Exécutez la commande suivante dans le répertoire où vous avez enregistré bookstore.proto :
```
python3 -m grpc_tools.protoc \
    --include_imports \
    --include_source_info \
    --proto_path=. \
    --descriptor_set_out=api_descriptor.pb \
    --python_out=generated_pb2 \
    --grpc_python_out=generated_pb2 \
    bookstore.proto
```
  Dans la commande ci-dessus, --proto_path est défini sur le répertoire de travail actuel. Dans votre environnement de compilation gRPC, si vous utilisez un autre répertoire pour les fichiers d'entrée .proto, modifiez --proto_path pour que le compilateur recherche le répertoire dans lequel vous avez enregistré votre fichier bookstore.proto.

Créez un fichier texte appelé api_config.yaml dans votre répertoire de travail actuel (le même répertoire que celui contenant bookstore.proto). Pour plus de commodité, cette page utilise ce nom de fichier pour désigner le document de configuration de l'API gRPC, mais vous pouvez lui donner un autre nom si vous préférez. Ajoutez le contenu suivant au fichier :

# The configuration schema is defined by the service.proto file.
# https://github.com/googleapis/googleapis/blob/master/google/api/service.proto

type: google.api.Service
config_version: 3
name: CLOUD_RUN_HOSTNAME
title: Cloud Endpoints + Cloud Run gRPC
apis:
  - name: endpoints.examples.bookstore.Bookstore
usage:
  rules:
  # ListShelves methods can be called without an API Key.
  - selector: endpoints.examples.bookstore.Bookstore.ListShelves
    allow_unregistered_calls: true
backend:
  rules:
    - selector: "*"
      address: grpcs://BACKEND_HOST_NAME

La mise en retrait est importante pour le format YAML. Par exemple, le champ name doit se trouver au même niveau que type.

Dans le champ name, spécifiez CLOUD_RUN_HOSTNAME, c'est-à-dire la partie nom d'hôte de l'URL réservée, comme indiqué ci-dessus dans la section Réserver un nom d'hôte Cloud Run. N'incluez pas l'identifiant de protocole, tel que https:// ou grpcs://.
Dans le champ address de la section backend.rules, remplacez BACKEND_HOST_NAME par le service Cloud Run gRPC Bookstore réel créé dans la section Avant de commencer.

Remarque : Pour utiliser gRPC avec TLS sur Cloud Run, le champ address doit avoir le schéma grpcs:// au lieu de https://.
Notez la valeur de la propriété title dans le fichier api_config.yaml :
```
title: Cloud Endpoints + Cloud Run gRPC
```
La valeur de la propriété title devient le nom du service Endpoints après le déploiement de la configuration.
Enregistrez le document de configuration de votre API gRPC.

Pour en savoir plus, consultez la page Configurer Endpoints.

Déployer la configuration Endpoints

Pour déployer la configuration Endpoints, exécutez la commande gcloud endpoints services deploy. Cette commande crée un service géré à l'aide de Service Management.

Vérifiez que vous êtes bien dans le répertoire où se trouvent les fichiers api_descriptor.pb et api_config.yaml.
Vérifiez que le projet par défaut actuellement utilisé par l'outil de ligne de commande gcloud est bien le projet Google Cloud vers lequel vous souhaitez déployer la configuration Endpoints. Validez l'ID de projet renvoyé par la commande suivante, afin de vous assurer que le service est créé dans le bon projet.
```
gcloud config list project
```
Si vous devez modifier le projet par défaut, exécutez la commande suivante :
```
gcloud config set project YOUR_PROJECT_ID
```
Déployez le fichier proto descriptor et le fichier de configuration à l'aide de Google Cloud CLI:
```
gcloud endpoints services deploy api_descriptor.pb api_config.yaml
```
Lors de la création et de la configuration du service, Service Management envoie des informations au terminal. Une fois le déploiement terminé, un message semblable au suivant s'affiche :
```
Service Configuration [CONFIG_ID] uploaded for service [bookstore.endpoints.example-project.cloud.goog]
```
CONFIG_ID correspond à l'ID unique de configuration du service Endpoints créé par le déploiement. Exemple :
```
Service Configuration [2017-02-13r0] uploaded for service [bookstore.endpoints.example-project.cloud.goog]
```
Dans l'exemple précédent, 2017-02-13r0 correspond à l'ID de configuration du service et bookstore.endpoints.example-project.cloud.goog au nom du service. L'ID de configuration du service se compose d'un horodatage suivi d'un numéro de révision. Si vous déployez à nouveau la configuration Endpoints le même jour, le numéro de révision est incrémenté dans l'ID de configuration du service.

Vérifier les services requis

Cloud Endpoints et ESP nécessitent au minimum l'activation des services Google suivants:

Nom	Title (Titre)
`servicemanagement.googleapis.com`	API Service Management
`servicecontrol.googleapis.com`	API Service Control
`endpoints.googleapis.com`	Google Cloud Endpoints

Dans la plupart des cas, la commande gcloud endpoints services deploy permet d'activer ces services requis. Toutefois, bien que la commande gcloud ait abouti, elle n'active pas les services requis dans les cas suivants :

Vous avez utilisé une application tierce telle que Terraform et vous n'incluez pas ces services.
Vous avez déployé la configuration Endpoints dans un projet Google Cloud existant dans lequel ces services étaient explicitement désactivés.

Utilisez la commande suivante pour vérifier que les services nécessaires sont activés :

gcloud services list

Si les services requis ne sont pas répertoriés, activez-les :

gcloud services enable servicemanagement.googleapis.com
gcloud services enable servicecontrol.googleapis.com
gcloud services enable endpoints.googleapis.com

Activez également votre service Endpoints :

gcloud services enable ENDPOINTS_SERVICE_NAME

Pour déterminer la valeur de ENDPOINTS_SERVICE_NAME, vous pouvez effectuer l'une des opérations suivantes :

Après avoir déployé la configuration des points de terminaison, accédez à la page Points de terminaison de la console Cloud. La liste des valeurs ENDPOINTS_SERVICE_NAME possibles s'affiche dans la colonne Nom du service.
Pour OpenAPI, ENDPOINTS_SERVICE_NAME correspond à ce que vous avez spécifié dans le champ host de votre spécification OpenAPI. Pour gRPC, ENDPOINTS_SERVICE_NAME correspond à ce que vous avez spécifié dans le champ name de votre configuration Endpoints gRPC.

Pour en savoir plus sur les commandes gcloud, consultez la page Services gcloud.

Si vous recevez un message d'erreur, consultez la page Dépannage du déploiement de la configuration Cloud Endpoints.

Pour en savoir plus, consultez la page Déployer la configuration Endpoints.

Créer une image ESPv2

Créez la configuration du service Endpoints dans une nouvelle image ESPv2 pour Docker. Vous déploierez par la suite cette image sur le service Cloud Run réservé.

Remarque :

Cette étape est obligatoire.

La configuration de service doit être intégrée à une nouvelle image Docker, car Cloud Run est un service avec scaling à zéro instance. Cela signifie qu'en l'absence de trafic, toutes les instances sont supprimées. Lorsque le trafic augmente, des instances sont créées à la demande. Ce type de création d'instances de service est également appelé démarrage à froid. Pour en savoir plus, consultez la documentation concernant la simultanéité de Cloud Run.

Si l'image Docker ne contenait pas la configuration du service, Cloud Run devrait effectuer deux appels d'API à Google Service Management à chaque démarrage à froid. Ces appels seraient alors comptabilisés dans votre quota d'API Google Service Management.

En créant la configuration du service dans l'image ESPv2 pour Docker, vous supprimez les deux appels d'API, ce qui évite d'affecter le quota du service Google Service Management. Cette étape accélère également la création de la nouvelle instance du service et réduit la latence des requêtes qui attendent la nouvelle instance.

Vous devez exécuter à nouveau l'intégralité de cette étape et redéployer le nouveau conteneur :

chaque fois que vous modifiez et redéployez la configuration du service Endpoints. Sans cela, les modifications apportées à la configuration du service ne seront pas appliquées à ESPv2.
Lorsqu'une nouvelle version d'ESPv2 est disponible. Sans cela, l'ancienne version d'ESPv2 restera déployée.

Pour créer la configuration de service dans une nouvelle image ESPv2 pour Docker, procédez comme suit :

Téléchargez ce script sur l'ordinateur local sur lequel la gcloud CLI est installée.

Remarque :
Ce script nécessite bash. Si vous n'utilisez pas macOS/Linux, vous pouvez l'exécuter sur Cloud Shell, Compute Engine ou le sous-système Windows pour Linux.
Exécutez le script à l'aide de la commande suivante:
```
chmod +x gcloud_build_image

./gcloud_build_image -s CLOUD_RUN_HOSTNAME \
    -c CONFIG_ID -p ESP_PROJECT_ID
```
Pour le paramètre CLOUD_RUN_HOSTNAME, spécifiez le nom d'hôte de l'URL que vous avez réservé, comme indiqué ci-dessus dans la section Réserver un nom d'hôte Cloud Run. N'incluez pas l'identifiant du protocole https://.

Exemple :
```
chmod +x gcloud_build_image

./gcloud_build_image -s gateway-12345-uc.a.run.app \
    -c 2019-02-01r0 -p your-project-id
```
Le script utilise la commande gcloud pour télécharger la configuration de service, la compiler dans une nouvelle image ESPv2, puis importer la nouvelle image dans le registre de conteneurs de votre projet. Le script utilise automatiquement la dernière version d'ESPv2, désignée par ESP_VERSION dans le nom de l'image de sortie. L'image de sortie est importée dans l'emplacement suivant :
```
gcr.io/ESP_PROJECT_ID/endpoints-runtime-serverless:ESP_VERSION-CLOUD_RUN_HOSTNAME-CONFIG_ID
```
Exemple :
```
gcr.io/your-project-id/endpoints-runtime-serverless:2.14.0-gateway-12345-uc.a.run.app-2019-02-01r0"
```
Remarque :
Transmettez l'option -z au script pour générer l'image dans un emplacement de registre différent.

Par exemple, pour transférer l'image ESPv2 générée vers un centre de données de l'Union européenne, transmettez -z eu au script.

Déployer le conteneur ESPv2

Déployez le service ESPv2 pour Cloud Run avec la nouvelle image créée ci-dessus. Remplacez CLOUD_RUN_SERVICE_NAME par le nom du service Cloud Run utilisé lors de la réservation initiale du nom d'hôte, comme indiqué ci-dessus dans la section Réserver un nom d'hôte Cloud Run :
```
gcloud run deploy CLOUD_RUN_SERVICE_NAME \
  --image="gcr.io/ESP_PROJECT_ID/endpoints-runtime-serverless:ESP_VERSION-CLOUD_RUN_HOSTNAME-CONFIG_ID" \
  --allow-unauthenticated \
  --platform managed \
  --project=ESP_PROJECT_ID
```
Remarque :
Si votre service gRPC utilise un protocole de streaming, ajoutez l'option --use-http2 à la commande gcloud run deploy. Actuellement, cette option n'est compatible qu'avec gcloud beta run. Ajoutez cette option lors du déploiement d'ESPv2 et des services de backend gRPC pour Cloud Run.
Si vous souhaitez configurer Endpoints afin d'utiliser d'autres options de démarrage d'ESPv2, telles que l'activation de CORS, vous pouvez transmettre les arguments dans la variable d'environnement ESPv2_ARGS :
```
gcloud run deploy CLOUD_RUN_SERVICE_NAME \
  --image="gcr.io/ESP_PROJECT_ID/endpoints-runtime-serverless:ESP_VERSION-CLOUD_RUN_HOSTNAME-CONFIG_ID" \
  --set-env-vars=ESPv2_ARGS=--cors_preset=basic \
  --allow-unauthenticated \
  --platform managed \
  --project ESP_PROJECT_ID
```
Pour en savoir plus et obtenir des exemples de définition de la variable d'environnement ESPv2_ARGS, y compris la liste des options disponibles et des informations sur la manière de spécifier plusieurs options, reportez-vous à la page sur les options d'Extensible Service Proxy V2.
Accordez à ESPv2 l'autorisation d'appeler vos services Cloud Run. Exécutez la commande ci-dessous pour chaque service. Dans la commande suivante :
Remarque :
Cette étape n'est pas nécessaire si le service ESPv2 pour Cloud Run est déployé sans l'option --service-account, et si le service de backend BACKEND_SERVICE_NAME est déployé dans le projet ESP_PROJECT_NUMBER.
- Remplacez BACKEND_SERVICE_NAME par le nom du service Cloud Run appelé. Si vous utilisez le service créé en déployant "gcr.io/endpointsv2/python-grpc-bookstore-server:2", utilisez python-grpc-bookstore-server comme valeur.
- Remplacez ESP_PROJECT_NUMBER par le numéro du projet que vous avez créé pour ESPv2. Pour ce faire, vous pouvez accéder à la page IAM de la console Google Cloud et rechercher le compte de service Compute par défaut, qui est le compte de service utilisé dans l'indicateur "member".
```
gcloud run services add-iam-policy-binding BACKEND_SERVICE_NAME \
  --member "serviceAccount:ESP_PROJECT_NUMBER-compute@developer.gserviceaccount.com" \
  --role "roles/run.invoker" \
  --platform managed \
  --project BACKEND_PROJECT_ID
```

Pour en savoir plus, consultez la page Gérer les accès à l'aide d'IAM.

Envoyer des requêtes à l'API

Pour envoyer des requêtes à l'exemple d'API, vous pouvez utiliser un exemple de client gRPC écrit en Python.

Clonez le dépôt Git dans lequel le code client gRPC est hébergé :

git clone https://github.com/GoogleCloudPlatform/python-docs-samples.git

Modifiez votre répertoire de travail :

cd python-docs-samples/endpoints/bookstore-grpc/

Installez les dépendances :

pip3 install virtualenv
virtualenv env
source env/bin/activate
pip3 install -r requirements.txt

Envoyez une requête à l'exemple d'API :
```
python3 bookstore_client.py --host CLOUD_RUN_HOSTNAME --port 443 --use_tls true
```
Spécifiez le nom d'hôte de votre service Cloud Run ESPv2 dans CLOUD_RUN_HOSTNAME, sans l'identifiant de protocole. Exemple :
```
python3 bookstore_client.py --host espv2-grpc-HASH-uc.a.run.app --port 443 --use_tls true
```
- Consultez les graphiques d'activité de votre API sur la page Endpoints > Services.
  
  Accédez à la page Services Endpoints
  
  Il peut s'écouler quelques instants avant que la requête ne soit reflétée dans les graphiques.
- Consultez les journaux de requêtes de votre API sur la page de l'explorateur de journaux.
  
  Accéder à la page "Explorateur de journaux"

Si vous ne recevez pas de réponse positive, consultez la page Dépanner des erreurs de réponse.

Vous venez de déployer et de tester une API dans Endpoints.

Suivre l'activité de l'API

Affichez les graphiques d'activité de votre API sur la page Endpoints > Service de la console Google Cloud.

Afficher les graphiques d'activité Endpoints

Il peut s'écouler quelques instants avant que la requête ne soit reflétée dans les graphiques.
Consultez les journaux de requêtes de votre API sur la page de l'explorateur de journaux.

Afficher les journaux de requête Endpoints

Créer un portail développeur pour l'API

Vous pouvez utiliser le portail Cloud Endpoints pour créer un portail des développeurs, c'est-à-dire un site Web qui vous permet d'interagir avec l'exemple d'API. Pour en savoir plus, consultez la page Présentation du portail Cloud Endpoints.

Effectuer un nettoyage

Pour éviter que les ressources utilisées sur cette page soient facturées sur votre compte Google Cloud, procédez comme suit :

Pour plus d'informations sur l'arrêt des services utilisés par ce tutoriel, consultez la page Supprimer une API et des instances d'API.