アプリケーションのロギングとモニタリング

このページでは、ユーザーアプリケーションのカスタムのログと指標を Cloud Logging と Cloud Monitoring に送信するように、Anthos clusters on VMware（GKE On-Prem）のユーザークラスタを構成する方法について説明します。

ユーザーアプリケーションの Logging と Monitoring の有効化

Logging と Monitoring の構成は、stackdriver という名前の Stackdriver オブジェクトに保持されます。

stackdriver オブジェクトを編集用に開きます。
```
kubectl --kubeconfig=USER_CLUSTER_KUBECONFIG --namespace kube-system edit stackdriver stackdriver
```
USER_CLUSTER_KUBECONFIG は、ユーザークラスタ kubeconfig ファイルのパスに置き換えます。

spec で、enableStackdriverForApplications を true に設定します。

  apiVersion: addons.sigs.k8s.io/v1alpha1
  kind: Stackdriver
  metadata:
    name: stackdriver
    namespace: kube-system
  spec:
    projectID: ...
    clusterName: ...
    clusterLocation: ...
    proxyConfigSecretName: ...
    enableStackdriverForApplications: true
    enableVPC: ...
    optimizedMetrics: true

編集したファイルを閉じます。

ワークロードへのアノテーションの設定

アプリケーションのカスタム指標の収集を有効にするには、アプリケーションの Service マニフェストまたは Deployment マニフェストに prometheus.io/scrape: "true" アノテーションを追加します。

指標のガベージコレクションを回避するため、指標の収集間隔を 1 分に設定することをおすすめします。

サンプルアプリケーションの実行

このセクションでは、カスタムログを書き込み、カスタム指標を公開するアプリケーションを作成します。

次の Service マニフェストと Deployment マニフェストを my-app.yaml という名前のファイルに保存します。Service に prometheus.io/scrape: "true" というアノテーションが付いていることに注意してください。

kind: Service
apiVersion: v1
metadata:
  name: "monitoring-example"
  namespace: "default"
  annotations:
    prometheus.io/scrape: "true"
spec:
  selector:
    app: "monitoring-example"
  ports:
    - name: http
      port: 9090
---
apiVersion: apps/v1
kind: Deployment
metadata:
  name: "monitoring-example"
  namespace: "default"
  labels:
    app: "monitoring-example"
spec:
  replicas: 1
  selector:
    matchLabels:
      app: "monitoring-example"
  template:
    metadata:
      labels:
        app: "monitoring-example"
    spec:
      containers:
      - image: gcr.io/google-samples/prometheus-dummy-exporter:latest
        name: prometheus-example-exporter
        imagePullPolicy: Always
        command:
        - /bin/sh
        - -c
        - ./prometheus-dummy-exporter --metric-name=example_monitoring_up --metric-value=1 --port=9090
        resources:
          requests:
            cpu: 100m

Deployment と Service を作成します。

kubectl --kubeconfig USER_CLUSTER_KUBECONFIG apply -f my-app.yaml

アプリケーションログの表示

Console

Google Cloud コンソールの [ログエクスプローラ] に移動します。

ログエクスプローラに移動
[リソース] をクリックします。[すべてのリソースタイプ] で [Kubernetes Container] を選択します。
[CLUSTER_NAME] で、ユーザークラスタの名前を選択します。
[NAMESPACE_NAME] で [default] を選択します。
[追加] をクリックしてから、[クエリを実行] をクリックします。

[クエリ結果] で、monitoring-example Deployment からのログエントリを確認できます。例:

{
  "textPayload": "2020/11/14 01:24:24 Starting to listen on :9090\n",
  "insertId": "1oa4vhg3qfxidt",
  "resource": {
    "type": "k8s_container",
    "labels": {
      "pod_name": "monitoring-example-7685d96496-xqfsf",
      "cluster_name": ...,
      "namespace_name": "default",
      "project_id": ...,
      "location": "us-west1",
      "container_name": "prometheus-example-exporter"
    }
  },
  "timestamp": "2020-11-14T01:24:24.358600252Z",
  "labels": {
    "k8s-pod/pod-template-hash": "7685d96496",
    "k8s-pod/app": "monitoring-example"
  },
  "logName": "projects/.../logs/stdout",
  "receiveTimestamp": "2020-11-14T01:24:39.562864735Z"
}

gcloud

次のコマンドを実行します。

gcloud logging read 'resource.labels.project_id="PROJECT_ID" AND \
    resource.type="k8s_container" AND resource.labels.namespace_name="default"'

PROJECT_ID は、logging-monitoring プロジェクトの ID に置き換えます。

出力で、monitoring-example Deployment からのログエントリを確認できます。次に例を示します。

insertId: 1oa4vhg3qfxidt
labels:
  k8s-pod/app: monitoring-example
  k8s- pod/pod-template-hash: 7685d96496
logName: projects/.../logs/stdout
receiveTimestamp: '2020-11-14T01:24:39.562864735Z'
resource:
  labels:
    cluster_name: ...
    container_name: prometheus-example-exporter
    location: us-west1
    namespace_name: default
    pod_name: monitoring-example-7685d96496-xqfsf
    project_id: ...
  type: k8s_container
textPayload: |
  2020/11/14 01:24:24 Starting to listen on :9090
timestamp: '2020-11-14T01:24:24.358600252Z'

Google Cloud Console でのアプリケーション指標の表示

サンプルアプリケーションでは、example_monitoring_up という名前のカスタム指標が公開されています。Google Cloud コンソールで、その指標の値を確認できます。

Google Cloud コンソールの Metrics Explorer に移動します。

Metrics Explorer に移動
[Resource types] で [Kubernetes Pod] を選択します。
[Metrics] で [external/prometheus/example_monitoring_up] を選択します。
このチャートでは、example_monitoring_up の繰り返し値が 1 であることがわかります。