MySQL

Die MySQL-Integration erfasst Leistungsmesswerte für InnoDB, den Zwischenspeicherpool und verschiedene andere Vorgänge. Außerdem werden allgemeine Logs, Fehlerlogs und Logs für langsame Abfragen erfasst und in eine JSON-Nutzlast geparst. Fehlerlogs werden nach ihrem Fehlercode und Subsystem geparst. Logs für langsame Abfragen werden in Schlüssel/Wert-Paare geparst, die die Leistung einer Abfrage beschreiben, einschließlich der Abfragezeit und der untersuchten Zeilen.

Weitere Informationen zu MySQL finden Sie unter mysql.com.

Vorbereitung

Zum Erfassen von MySQL-Telemetrie müssen Sie Ops Agent ab Version 2.8.0 installieren.

Dieser Empfänger unterstützt die MySQL-Versionen 5.7 und 8.0.

MySQL-Instanz konfigurieren

Der mysql-Empfänger stellt standardmäßig über einen Unix-Socket und eine Unix-Authentifizierung als root-Nutzer eine Verbindung zu einem lokalen MySQL-Server her.

Ops Agent für MySQL konfigurieren

Fügen Sie die erforderlichen Elemente zum Erfassen von Logs und Messwerten aus den MySQL-Instanzen gemäß der Anleitung unter Ops-Agent konfigurieren hinzu und starten Sie den Agent neu.

Konfigurationsbeispiel

Die folgenden Befehle erstellen die Konfigurationsdatei, um Logs und Messwerte für MySQL zu erfassen und aufzunehmen, und starten den Ops-Agent unter Linux neu.

# Configures Ops Agent to collect telemetry from the app and restart Ops Agent.

set -e

# Create a back up of the existing file so existing configurations are not lost.
sudo cp /etc/google-cloud-ops-agent/config.yaml /etc/google-cloud-ops-agent/config.yaml.bak

# Configure the Ops Agent.
sudo tee /etc/google-cloud-ops-agent/config.yaml > /dev/null << EOF
metrics:
  receivers:
    mysql:
      type: mysql
      username: root
      password: Ss123%321
  service:
    pipelines:
      mysql:
        receivers:
        - mysql
logging:
  receivers:
    mysql_error:
      type: mysql_error
    mysql_general:
      type: mysql_general
    mysql_slow:
      type: mysql_slow
  service:
    pipelines:
      mysql:
        receivers:
          - mysql_error
          - mysql_general
          - mysql_slow
EOF

sudo service google-cloud-ops-agent restart
sleep 60

Wenn Sie eine Verbindung zu Ihrer MySQL-Instanz über eine TCP-Verbindung mit einem Nutzernamen und einem Passwort herstellen möchten, geben Sie in dem Messwertempfänger den Nutzernamen und das Passwort an. Beispiel:

metrics:
  receivers:
    mysql:
      type: mysql
      endpoint: localhost:3306
      password: pwd
      username: usr
  service:
    pipelines:
      mysql:
        receivers:
          - mysql

Logerfassung konfigurieren

Um Logs von MySQL aufzunehmen, müssen Sie Empfänger für die von MySQL erzeugten Logs erstellen und dann eine Pipeline für die neuen Empfänger erstellen.

Geben Sie die folgenden Felder an, um einen Empfänger für Ihre mysql_error-Logs zu konfigurieren:

Feld Standard Beschreibung
type Dieser Wert muss mysql_error sein.
include_paths [/var/log/mysqld.log, /var/log/mysql/mysqld.log, /var/log/mysql/error.log] Eine Liste mit Dateisystempfaden, die durch Tailing jeder Datei gelesen werden sollen. In den Pfaden kann ein Platzhalter (*) verwendet werden. Beispiel: /var/log/mysql/*.log.
exclude_paths [] Eine Liste von Dateisystempfadmustern, die aus dem mit include_paths übereinstimmenden Satz ausgeschlossen werden sollen.
record_log_file_path false Wenn true festgelegt ist, wird der Pfad zu der spezifischen Datei, aus der der Logdatensatz abgerufen wurde, im Ausgabelogeintrag als Wert des Labels agent.googleapis.com/log_file_path angezeigt. Bei Verwendung eines Platzhalters wird nur der Pfad der Datei aufgezeichnet, aus der der Eintrag abgerufen wurde.
wildcard_refresh_interval 60s Das Intervall, in dem Platzhalterdateipfade in include_paths aktualisiert werden. Wird als Zeitdauer angegeben, z. B. 30s oder 2m. Dieses Attribut kann bei hohen Logging-Durchsätzen nützlich sein, wenn Logdateien schneller als das Standardintervall rotiert werden.


Geben Sie die folgenden Felder an, um einen Empfänger für Ihre mysql_general-Logs zu konfigurieren:

Feld Standard Beschreibung
type Dieser Wert muss mysql_general sein.
include_paths [/var/lib/mysql/${HOSTNAME}.log] Die zu lesenden Logdateien.
exclude_paths [] Eine Liste von Dateisystempfadmustern, die aus dem mit include_paths übereinstimmenden Satz ausgeschlossen werden sollen.
record_log_file_path false Wenn true festgelegt ist, wird der Pfad zu der spezifischen Datei, aus der der Logdatensatz abgerufen wurde, im Ausgabelogeintrag als Wert des Labels agent.googleapis.com/log_file_path angezeigt. Bei Verwendung eines Platzhalters wird nur der Pfad der Datei aufgezeichnet, aus der der Eintrag abgerufen wurde.
wildcard_refresh_interval 60s Das Intervall, in dem Platzhalterdateipfade in include_paths aktualisiert werden. Wird als Zeitdauer angegeben, z. B. 30s oder 2m. Dieses Attribut kann bei hohen Logging-Durchsätzen nützlich sein, wenn Logdateien schneller als das Standardintervall rotiert werden.


Geben Sie die folgenden Felder an, um einen Empfänger für Ihre mysql_slow-Logs zu konfigurieren:

Feld Standard Beschreibung
type Dieser Wert muss mysql_slow sein.
include_paths [/var/lib/mysql/${HOSTNAME}-slow.log] Die zu lesenden Logdateien.
exclude_paths [] Eine Liste von Dateisystempfadmustern, die aus dem mit include_paths übereinstimmenden Satz ausgeschlossen werden sollen.
record_log_file_path false Wenn true festgelegt ist, wird der Pfad zu der spezifischen Datei, aus der der Logdatensatz abgerufen wurde, im Ausgabelogeintrag als Wert des Labels agent.googleapis.com/log_file_path angezeigt. Bei Verwendung eines Platzhalters wird nur der Pfad der Datei aufgezeichnet, aus der der Eintrag abgerufen wurde.
wildcard_refresh_interval 60s Das Intervall, in dem Platzhalterdateipfade in include_paths aktualisiert werden. Wird als Zeitdauer angegeben, z. B. 30s oder 2m. Dieses Attribut kann bei hohen Logging-Durchsätzen nützlich sein, wenn Logdateien schneller als das Standardintervall rotiert werden.

Was wird protokolliert?

Der logName der Logs mysql_error, mysql_general und mysql_slow werden von den Empfänger-IDs abgeleitet, die in der Konfiguration angegeben sind.

Je nach MySQL-Version können mysql_error-Logs die folgenden Felder im LogEntry enthalten:

Feld Typ Beschreibung
jsonPayload.level String Logeintragsebene
jsonPayload.tid Zahl Thread-ID, von der das Log stammt
jsonPayload.errorCode String Mit dem Log verknüpfter MySQL-Fehlercode
jsonPayload.subsystem String MySQL-Subsystem, von dem das Log stammt
jsonPayload.message String Log-Nachricht
severity String (LogSeverity) Ebene des Logeintrags (übersetzt)
timestamp String (Timestamp) Zeitpunkt des Eingangs der Anfrage

Leere oder fehlende Felder werden nicht im Logeintrag angezeigt.


mysql_general-Logs enthalten die folgenden Felder in LogEntry:

Feld Typ Beschreibung
jsonPayload.tid Zahl Thread-ID, von der das Log stammt
jsonPayload.command String Typ der zu protokollierenden Datenbankaktion
jsonPayload.message String Log der Datenbankaktion
timestamp String (Timestamp) Zeitpunkt, zu dem der Eintrag protokolliert wurde


mysql_slow-Logs enthalten die folgenden Felder in LogEntry:

Feld Typ Beschreibung
jsonPayload.user String Nutzer, der die Abfrage ausgeführt hat
jsonPayload.database String Datenbank, in der die Abfrage ausgeführt wurde
jsonPayload.host String Host der Datenbankinstanz
jsonPayload.ipAddress String Adresse der Datenbankinstanz
jsonPayload.tid Zahl Thread-ID, unter der die Abfrage protokolliert wurde
jsonPayload.queryTime Zahl Die Ausführungszeit der Anweisung in Sekunden
jsonPayload.lockTime Zahl Die Zeit in Sekunden, die zum Abrufen von Sperren benötigt wurde
jsonPayload.rowsSent Zahl Die Anzahl der an den Client gesendeten Zeilen
jsonPayload.rowsExamined Zahl Die Anzahl der von der Serverebene untersuchten Zeilen
jsonPayload.errorNumber† Zahl Die Fehlernummer der Anweisung oder 0, wenn kein Fehler aufgetreten ist
jsonPayload.killed† Zahl Wenn die Anweisung beendet wurde, gibt die Fehlernummer den Grund an oder 0, wenn die Anweisung normal beendet wurde
jsonPayload.bytesReceived† Zahl Die Anzahl der von allen Clients empfangenen Byte
jsonPayload.bytesSent† Zahl Die Anzahl der Byte, die an alle Clients gesendet wurden
jsonPayload.readFirst† Zahl Die Häufigkeit, mit der der erste Eintrag in einem Index gelesen wurde
jsonPayload.readLast† Zahl Die Anzahl der Anfragen zum Lesen des letzten Schlüssels in einem Index
jsonPayload.readKey† Zahl Die Anzahl der Anfragen zum Lesen einer Zeile basierend auf einem Schlüssel
jsonPayload.readNext† Zahl Die Anzahl der Anfragen zum Lesen der nächsten Zeile in der Schlüsselreihenfolge
jsonPayload.readPrev† Zahl Anzahl der Anfragen zum Lesen der vorherigen Zeile in der Schlüsselreihenfolge
jsonPayload.readRnd† Zahl Die Anzahl der Anfragen zum Lesen einer Zeile basierend auf einer festen Position
jsonPayload.readRndNext† Zahl Die Anzahl der Anfragen zum Lesen der nächsten Zeile in der Datendatei
jsonPayload.sortMergePasses† Zahl Anzahl der Zusammenführungen, die der Sortieralgorithmus ausführen musste
jsonPayload.sortRangeCount† Zahl Die Anzahl der Sortierungen, die mithilfe von Bereichen durchgeführt wurden
jsonPayload.sortRows† Zahl Die Anzahl der sortierten Zeilen
jsonPayload.sortScanCount† Zahl Die Anzahl der Sortierungen, die durch Scannen der Tabelle durchgeführt wurden
jsonPayload.createdTmpDiskTables† Zahl Die Anzahl der internen temporären Tabellen auf dem Laufwerk, die vom Server erstellt wurden
jsonPayload.createdTmpTables† Zahl Die Anzahl der internen temporären Tabellen, die vom Server erstellt werden
jsonPayload.startTime† String Beginn der Anweisungsausführung
jsonPayload.endTime† String Ende der Anweisungsausführung
jsonPayload.message String Vollständiger Text der Abfrage
timestamp String (Timestamp) Zeitpunkt, zu dem der Eintrag protokolliert wurde

†  Diese Felder werden nur bereitgestellt, wenn die Systemvariable log_slow_extra auf 'ON' gesetzt ist. Diese Variable ist ab MySQL 8.0.14 verfügbar.

Informationen zu diesen Feldern finden Sie in der MySQL-Dokumentation.

Messwerterfassung konfigurieren

Um Messwerte aus MySQL zu erfassen, müssen Sie einen Empfänger für MySQL-Messwerte erstellen und dann eine Pipeline für den neuen Empfänger erstellen.

Dieser Empfänger unterstützt die Verwendung mehrerer Instanzen in der Konfiguration, z. B. zum Überwachen mehrerer Endpunkte, nicht. Alle diese Instanzen schreiben in dieselbe Zeitachse und Cloud Monitoring kann sie nicht unterscheiden.

Um einen Empfänger für Ihre MySQL-Messwerte zu konfigurieren, geben Sie die folgenden Felder an:

Feld Standard Beschreibung
type Der Wert muss mysql betragen.
endpoint localhost:3306 Die von MySQL bereitgestellte URL.
collection_interval 60s Ein Wert für time.Duration, wie z. B. 30s oder 5m.
username root Das Nutzername für die Verbindung mit dem Server.
password Das Passwort für die Verbindung mit dem Server.

Was wird überwacht?

Die folgende Tabelle enthält die Liste der Messwerte, die der Ops-Agent aus der MySQL-Instanz erfasst.

Messwerttyp
Art, Typ
Überwachte Ressourcen		 Labels
workload.googleapis.com/mysql.buffer_pool_operations
CUMULATIVE, INT64
gce_instance 		operation
workload.googleapis.com/mysql.buffer_pool_pages
GAUGE, DOUBLE
gce_instance 		kind
workload.googleapis.com/mysql.buffer_pool_size
GAUGE, DOUBLE
gce_instance 		kind
workload.googleapis.com/mysql.commands
CUMULATIVE, INT64
gce_instance 		command
workload.googleapis.com/mysql.double_writes
CUMULATIVE, INT64
gce_instance 		kind
workload.googleapis.com/mysql.handlers
CUMULATIVE, INT64
gce_instance 		kind
workload.googleapis.com/mysql.locks
CUMULATIVE, INT64
gce_instance 		kind
workload.googleapis.com/mysql.log_operations
CUMULATIVE, INT64
gce_instance 		operation
workload.googleapis.com/mysql.operations
CUMULATIVE, INT64
gce_instance 		operation
workload.googleapis.com/mysql.page_operations
CUMULATIVE, INT64
gce_instance 		operation
workload.googleapis.com/mysql.row_locks
CUMULATIVE, INT64
gce_instance 		kind
workload.googleapis.com/mysql.row_operations
CUMULATIVE, INT64
gce_instance 		operation
workload.googleapis.com/mysql.sorts
CUMULATIVE, INT64
gce_instance 		kind
workload.googleapis.com/mysql.threads
GAUGE, DOUBLE
gce_instance 		kind

Konfiguration prüfen

In diesem Abschnitt wird beschrieben, wie Sie prüfen können, ob Sie den MySQL-Empfänger richtig konfiguriert haben. Es kann ein oder zwei Minuten dauern, bis der Ops-Agent Telemetriedaten erfasst.

So prüfen Sie, ob MySQL-Logs an Cloud Logging gesendet werden:

  1. Wählen Sie im Navigationsbereich der Google Cloud Console Logging und anschließend Log-Explorer aus:

    Zum Log-Explorer

  2. Geben Sie die folgende Abfrage in den Editor ein und klicken Sie dann auf Abfrage ausführen: 
    resource.type="gce_instance"
(log_id("mysql_error") OR log_id("mysql_general") OR log_id("mysql_slow"))

So prüfen Sie, ob MySQL-Messwerte an Cloud Monitoring gesendet werden:

  1. Wählen Sie im Navigationsbereich der Google Cloud Console Monitoring und anschließend  Metrics Explorer aus:

    Zum Metrics Explorer

  2. Wählen Sie in der Symbolleiste des Bereichs „Query Builder“ die Schaltfläche mit dem Namen  MQL oder  PromQL aus.
  3. Prüfen Sie, ob im Umschalter Sprache MQL ausgewählt ist. Die Ein-/Aus-Schaltfläche für die Sprache befindet sich in derselben Symbolleiste, mit der Sie die Abfrage formatieren können.
  4. Geben Sie die folgende Abfrage in den Editor ein und klicken Sie dann auf Abfrage ausführen: 
    fetch gce_instance
| metric 'workload.googleapis.com/mysql.commands'
| align rate(1m)
| every 1m

Dashboard aufrufen

Damit Sie Ihre MySQL-Messwerte aufrufen können, müssen Sie ein Diagramm oder ein Dashboard konfiguriert haben. Die MySQL-Integration umfasst ein oder mehrere Dashboards. Alle Dashboards werden automatisch installiert, nachdem Sie die Integration konfiguriert haben und der Ops-Agent mit dem Erfassen von Messwertdaten begonnen hat.

Sie können auch eine statische Vorschau von Dashboards aufrufen, ohne die Integration zu installieren.

So rufen Sie ein installiertes Dashboard auf:

  1. Wählen Sie im Navigationsbereich der Google Cloud Console Monitoring und anschließend  Dashboards aus:

    Zu Dashboards

  2. Wählen Sie den Tab Dashboard-Liste und dann die Kategorie Integrationen aus.
  3. Wählen Sie den Namen des Dashboards aus, das Sie aufrufen möchten.

Wenn Sie eine Integration konfiguriert haben, das Dashboard jedoch nicht installiert ist, prüfen Sie, ob der Ops-Agent ausgeführt wird. Wenn im Dashboard keine Messwertdaten für ein Diagramm vorhanden sind, schlägt die Installation des Dashboards fehl. Nachdem der Ops-Agent mit dem Erfassen von Messwerten begonnen hat, wird das Dashboard für Sie installiert.

So rufen Sie eine statische Vorschau des Dashboards auf:

  1. Wählen Sie im Navigationsbereich der Google Cloud Console Monitoring und dann  Integrationen aus:

    Rufen Sie Integrationen auf.

  2. Klicken Sie auf den Filter für die Deployment-Plattform Compute Engine.
  3. Suchen Sie den Eintrag für MySQL und klicken Sie auf Details ansehen.
  4. Wählen Sie den Tab Dashboards aus, um eine statische Vorschau aufzurufen. Wenn das Dashboard installiert ist, können Sie es aufrufen. Klicken Sie dazu auf Dashboard aufrufen.

Weitere Informationen zu Dashboards in Cloud Monitoring finden Sie unter Dashboards und Diagramme.

Weitere Informationen zur Verwendung der Seite Integrationen finden Sie unter Integrationen verwalten.

Benachrichtigungsrichtlinien installieren

Durch Benachrichtigungsrichtlinien wird Cloud Monitoring angewiesen, Sie zu benachrichtigen, wenn bestimmte Bedingungen auftreten. Die MySQL-Integration umfasst eine oder mehrere Benachrichtigungsrichtlinien, die Sie verwenden können. Sie können diese Benachrichtigungsrichtlinien auf der Seite Integrationen in Monitoring aufrufen und installieren.

So zeigen Sie die Beschreibungen der verfügbaren Benachrichtigungsrichtlinien an und installieren sie:

  1. Wählen Sie im Navigationsbereich der Google Cloud Console Monitoring und dann  Integrationen aus:

    Rufen Sie Integrationen auf.

  2. Suchen Sie den Eintrag für MySQL und klicken Sie auf Details ansehen.
  3. Wählen Sie den Tab Benachrichtigungen aus. Dieser Tab enthält Beschreibungen der verfügbaren Benachrichtigungsrichtlinien und eine Oberfläche für deren Installation.
  4. Installieren Sie Benachrichtigungsrichtlinien. Benachrichtigungsrichtlinien müssen wissen, wohin Benachrichtigungen gesendet werden sollen, dass die Benachrichtigung ausgelöst wurde. Daher benötigen sie Informationen von Ihnen für die Installation. So installieren Sie Benachrichtigungsrichtlinien:
    1. Wählen Sie aus der Liste der verfügbaren Benachrichtigungsrichtlinien die Richtlinien aus, die Sie installieren möchten.

    2. Wählen Sie im Abschnitt Benachrichtigungen konfigurieren einen oder mehrere Benachrichtigungskanäle aus. Sie haben die Möglichkeit, die Verwendung von Benachrichtigungskanälen zu deaktivieren. In diesem Fall werden Ihre Benachrichtigungsrichtlinien jedoch automatisch ausgelöst. Sie können ihren Status in Monitoring prüfen, aber Sie erhalten keine Benachrichtigungen.

      Weitere Informationen zu Benachrichtigungskanälen finden Sie unter Benachrichtigungskanäle verwalten.

    3. Klicken Sie auf Richtlinien erstellen.

Weitere Informationen zu Benachrichtigungsrichtlinien in Cloud Monitoring finden Sie unter Einführung in Benachrichtigungen.

Weitere Informationen zur Verwendung der Seite Integrationen finden Sie unter Integrationen verwalten.

Nächste Schritte

Eine Anleitung zur Installation von Ops-Agent mit Ansible zum Konfigurieren einer Drittanbieteranwendung und zum Installieren eines Beispieldashboards finden Sie im Video Ops-Agent installieren, um Fehler in Drittanbieteranwendungen zu beheben.