Dataproc Metastore aus einer Sicherung wiederherstellen

Auf dieser Seite wird erläutert, wie Sie einen Dataproc Metastore-Dienst wiederherstellen. aus einem Back-up.

Eine Sicherung ist ein Snapshot der Konfigurationseinstellungen und Metadaten, die in einem Dataproc Metastore-Dienst. Mit der Wiederherstellungsfunktion einen neuen Dataproc Metastore-Dienst mit die zuvor in einem Back-up gespeicherten Daten verwendet werden.

Hinweise

Erforderliche Rollen

So erhalten Sie die Berechtigungen, die Sie zum Wiederherstellen eines Dataproc Metastore-Dienstes aus einer Sicherung benötigen: bitten Sie Ihren Administrator, Ihnen folgenden IAM-Rollen:

  • Wenn Sie die vollständige Kontrolle über Dataproc Metastore-Ressourcen zum Ausführen einer Sicherung gewähren möchten, haben Sie folgende Möglichkeiten: <ph type="x-smartling-placeholder">
  • So verwenden Sie das Cloud Storage-Objekt, das geplante Sicherungen speichert: Cloud Storage-Objektnutzer (roles/storage.objectUser) im Dataproc Metastore-Dienst-Agent

Weitere Informationen zum Zuweisen von Rollen finden Sie unter Zugriff verwalten.

Diese vordefinierten Rollen enthalten Die Berechtigungen, die zum Wiederherstellen eines Dataproc Metastore-Dienstes aus einer Sicherung erforderlich sind. Erweitern Sie den Abschnitt Erforderliche Berechtigungen, um die erforderlichen Berechtigungen anzuzeigen:

Erforderliche Berechtigungen

Die folgenden Berechtigungen sind erforderlich, um einen Dataproc Metastore-Dienst aus einer Sicherung wiederherzustellen:

  • So stellen Sie einen Metadatendienst wieder her: metastore.services.restore, metastore.backups.use
  • So verwenden Sie das Cloud Storage-Objekt: <ph type="x-smartling-placeholder">
      </ph>
    • orgpolicy.policy.get
    • resourcemanager.projects.get
    • resourcemanager.projects.list
    • storage.managedFolders.create
    • storage.managedFolders.delete
    • storage.managedFolders.get
    • storage.managedFolders.list
    • storage.multipartUploads.*
    • storage.objects.create
    • storage.objects.delete
    • storage.objects.get
    • storage.objects.list
    • storage.objects.restore
    • storage.objects.update

Sie können diese Berechtigungen auch mit benutzerdefinierten Rollen oder anderen vordefinierten Rollen erhalten.

Weitere Informationen zu bestimmten Dataproc Metastore-Rollen und -Berechtigungen finden Sie in der Übersicht zu Dataproc Metastore IAM.

Wiederherstellung aus einer Sicherung

Wenn Sie einen Dienst aus einer Sicherung wiederherstellen, können Sie einen der folgende Optionen:

  • Stellen Sie alle Metadaten und die in der Sicherung gespeicherten Konfigurationseinstellungen wieder her.

  • Alle Metadaten wiederherstellen, aber nicht die in folgendem Ordner gespeicherten Konfigurationseinstellungen wiederherstellen Back-up erstellen. Stattdessen behält der Dienst Ihre aktuellen Konfigurationseinstellungen bei.

    Die Konfigurationseinstellungen enthalten Dataproc Metastore-Parameter. wie Dienstname, Portnummer und Netzwerkeinstellungen. Metadaten umfassen alle Datenbank- und Tabelleninformationen, die in einem Dataproc Metastore-Dienst

Hinweise

  • Während ein Wiederherstellungsvorgang ausgeführt wird, können Sie Ihr Sie können z. B. keine Konfigurationseinstellungen ändern. Sie haben jedoch können Ihren Dienst weiterhin für den normalen Betrieb nutzen, etwa für den Zugriff auf die zugehörigen Metadaten aus angehängten Dataproc-Clustern oder selbstverwalteten Clustern.

  • Dataproc Metastore-Labels werden nicht wiederhergestellt.

  • Im Warehouse-Verzeichnis gespeicherte Daten werden nicht wiederhergestellt.

  • Bei der Wiederherstellung aus einer Sicherung werden keine detailgenauen Wiederherstellungen vorgenommen oder ersetzt. IAM-Richtlinien

  • Für die Wiederherstellung aus einer geplanten Sicherung muss sich die Sicherung an einem Cloud Storage-Bucket.

Aus einer Sicherung wiederherstellen

Führen Sie folgende Schritte aus, um einen Dataproc Metastore-Dienst aus einer Sicherung wiederherzustellen: führen Sie die folgenden Schritte aus.

  • Wenn Sie die Google Cloud Console verwenden, können Sie Metadaten nur aus einem Sicherung, die im selben Projekt und in derselben Region erstellt wurde wie für Ihren neuen Dienst.

  • Wenn Sie die Google Cloud CLI oder Dataproc Metastore APIs verwenden, können Sie Metadaten aus einer Sicherung wiederherstellen, die in einem anderen Projekt erstellt wurde, und Region (dienstübergreifende Sicherung).

Console

  1. Öffnen Sie in der Google Cloud Console die Seite Dataproc Metastore:

    Dataproc Metastore öffnen

  2. Klicken Sie auf der Seite Dataproc Metastore auf den Namen des Dienstes. die Sie aus einer Sicherung wiederherstellen möchten.

    Die Seite Dienstdetails wird geöffnet.

    <ph type="x-smartling-placeholder">
    </ph> Seite „Dienstdetails“
    Abbildung 1: Dataproc Metastore Seite mit Dienstdetails

  3. Klicken Sie auf den Tab Backup/Wiederherstellung, um Ihre Sicherungen aufzurufen.

  4. Wählen Sie die gewünschte Sicherung aus. Klicken Sie dazu auf das Menüsymbol und wählen Sie Wiederherstellen.

    Die Seite Wiederherstellen wird geöffnet.

    Sie können den Dienst auch auf der Seite Sicherungsdetails wiederherstellen. Klicken Sie dazu auf den Namen der Sicherung und dann auf Wiederherstellen.

  5. Wählen Sie den entsprechenden Wiederherstellungsvorgang aus:

    • Metastore-Daten wiederherstellen Stellt alle Metadaten wieder her, aber nicht wiederhergestellt die in der Sicherung gespeicherten Konfigurationseinstellungen
    • Metastore-Daten und Dienstkonfiguration wiederherstellen Es werden alle Metadaten und sämtliche Konfigurationseinstellungen wiederhergestellt, die im Back-up.

  6. Klicken Sie auf Wiederherstellen, um den Dienst zu aktualisieren.

    Kehren Sie zur Seite Dataproc Metastore zurück und Überprüfen Sie, ob Ihr Dienst erfolgreich gesichert wurde.

    Nach Abschluss der Wiederherstellung wird Dataproc Metastore automatisch in den Status "Aktiv" zurück, unabhängig davon, ob die Wiederherstellung war nicht erfolgreich.

gcloud-CLI

  1. Führen Sie zum Wiederherstellen eines Dataproc Metastore-Dienstes den folgenden gcloud metastore services restore-Befehl:

    gcloud metastore services restore SERVICE  \
    --project=PROJECT_ID \
    --location=LOCATION \
    --backup=BACKUP \
    --restore-type=RESTORE_TYPE \
    --backup-location=BACKUP_LOCATION

    Ersetzen Sie Folgendes:

    • SERVICE: der Name Ihres Dataproc Metastore-Dienst
    • PROJECT_ID: die Projekt-ID von Google Cloud Projekt, in dem sich Ihr Dataproc Metastoreservice befindet.
    • LOCATION: die Google Cloud-Region, in der Ihr sich der Dataproc Metastore-Dienst befindet.
    • BACKUP (optional): Kennung der Sicherungsdatei von dem Sie die Wiederherstellung durchführen. Dieser Wert kann die Sicherungs-ID, ein qualifizierte URL oder den relativen Namen im folgenden Format an: projects/{project_id}/locations/{location_id}/services/{service_id}/backups/{backup_id}
    • RESTORE_TYPE: der Typ des Wiederherstellungsvorgangs die Sie ausführen können. Zulässige Werte sind „metadata-only“ und „full“. Der Standardwert ist metadata-only.
    • BACKUP_LOCATION (optional): Der Cloud Storage Speicherort der geplanten Sicherung gespeichert. Beispiel: gs://my-bucket/path/to/location

  2. Prüfen Sie, ob die Wiederherstellung erfolgreich war.

    Nach Abschluss der Wiederherstellung wird Dataproc Metastore automatisch in den Status "Aktiv" zurück, unabhängig davon, ob die Wiederherstellung war nicht erfolgreich.

REST

Folgen Sie der API-Anleitung, um Metadaten in einem Dienst wiederherzustellen. mit APIs Explorer.

Nach Abschluss der Wiederherstellung wird Dataproc Metastore automatisch in den Status "Aktiv" zurück, unabhängig davon, ob die Wiederherstellung erfolgreich war.

Wiederherstellungsverlauf ansehen

So rufen Sie den Wiederherstellungsverlauf eines Dataproc Metastore-Dienstes in in der Google Cloud Console führen Sie die folgenden Schritte aus:

  1. Öffnen Sie in der Google Cloud Console Console den Dataproc Metastore. Seite.

  2. Klicken Sie in der Navigationsleiste auf Backup/Restore (Sicherung/Wiederherstellung).

    Der Wiederherstellungsverlauf wird in einer Tabelle unter Wiederherstellen angezeigt.

    Im Verlauf werden maximal die 25 letzten Wiederherstellungen angezeigt, die Sie abgeschlossen haben.

    Beim Löschen eines Dataproc Metastore-Dienstes werden auch zugehörigen Wiederherstellungsverlaufs.

Häufige Probleme beheben

Nächste Schritte