Auf dieser Seite wird erläutert, wie Sie einen Dataproc Metastore-Dienst wiederherstellen. aus einem Back-up.
Eine Sicherung ist ein Snapshot der Konfigurationseinstellungen und Metadaten, die in einem Dataproc Metastore-Dienst. Mit der Wiederherstellungsfunktion einen neuen Dataproc Metastore-Dienst mit die zuvor in einem Back-up gespeicherten Daten verwendet werden.
Hinweise
- Aktivieren Sie Dataproc Metastore in Ihrem Projekt.
- Erstellen Sie einen Dataproc Metastore-Dienst.
- Dataproc Metastore-Dienst sichern
Erforderliche Rollen
So erhalten Sie die Berechtigungen, die Sie zum Wiederherstellen eines Dataproc Metastore-Dienstes aus einer Sicherung benötigen: bitten Sie Ihren Administrator, Ihnen folgenden IAM-Rollen:
-
Wenn Sie die vollständige Kontrolle über Dataproc Metastore-Ressourcen zum Ausführen einer Sicherung gewähren möchten, haben Sie folgende Möglichkeiten:
<ph type="x-smartling-placeholder">
- </ph>
-
Dataproc Metastore-Bearbeiter (
roles/metastore.editor
) im Metadatendienst. -
Dataproc Metastore-Administrator (
roles/metastore.admin
) für das Projekt.
-
Dataproc Metastore-Bearbeiter (
-
So verwenden Sie das Cloud Storage-Objekt, das geplante Sicherungen speichert:
Cloud Storage-Objektnutzer (
roles/storage.objectUser
) im Dataproc Metastore-Dienst-Agent
Weitere Informationen zum Zuweisen von Rollen finden Sie unter Zugriff verwalten.
Diese vordefinierten Rollen enthalten Die Berechtigungen, die zum Wiederherstellen eines Dataproc Metastore-Dienstes aus einer Sicherung erforderlich sind. Erweitern Sie den Abschnitt Erforderliche Berechtigungen, um die erforderlichen Berechtigungen anzuzeigen:
Erforderliche Berechtigungen
Die folgenden Berechtigungen sind erforderlich, um einen Dataproc Metastore-Dienst aus einer Sicherung wiederherzustellen:
-
So stellen Sie einen Metadatendienst wieder her:
metastore.services.restore, metastore.backups.use
-
So verwenden Sie das Cloud Storage-Objekt:
<ph type="x-smartling-placeholder">
- </ph>
-
orgpolicy.policy.get
-
resourcemanager.projects.get
-
resourcemanager.projects.list
-
storage.managedFolders.create
-
storage.managedFolders.delete
-
storage.managedFolders.get
-
storage.managedFolders.list
-
storage.multipartUploads.*
-
storage.objects.create
-
storage.objects.delete
-
storage.objects.get
-
storage.objects.list
-
storage.objects.restore
-
storage.objects.update
-
Sie können diese Berechtigungen auch mit benutzerdefinierten Rollen oder anderen vordefinierten Rollen erhalten.
Weitere Informationen zu bestimmten Dataproc Metastore-Rollen und -Berechtigungen finden Sie in der Übersicht zu Dataproc Metastore IAM.Wiederherstellung aus einer Sicherung
Wenn Sie einen Dienst aus einer Sicherung wiederherstellen, können Sie einen der folgende Optionen:
- Stellen Sie alle Metadaten und die in der Sicherung gespeicherten Konfigurationseinstellungen wieder her.
Alle Metadaten wiederherstellen, aber nicht die in folgendem Ordner gespeicherten Konfigurationseinstellungen wiederherstellen Back-up erstellen. Stattdessen behält der Dienst Ihre aktuellen Konfigurationseinstellungen bei.
Die Konfigurationseinstellungen enthalten Dataproc Metastore-Parameter. wie Dienstname, Portnummer und Netzwerkeinstellungen. Metadaten umfassen alle Datenbank- und Tabelleninformationen, die in einem Dataproc Metastore-Dienst
Hinweise
Während ein Wiederherstellungsvorgang ausgeführt wird, können Sie Ihr Sie können z. B. keine Konfigurationseinstellungen ändern. Sie haben jedoch können Ihren Dienst weiterhin für den normalen Betrieb nutzen, etwa für den Zugriff auf die zugehörigen Metadaten aus angehängten Dataproc-Clustern oder selbstverwalteten Clustern.
Dataproc Metastore-Labels werden nicht wiederhergestellt.
Im Warehouse-Verzeichnis gespeicherte Daten werden nicht wiederhergestellt.
Bei der Wiederherstellung aus einer Sicherung werden keine detailgenauen Wiederherstellungen vorgenommen oder ersetzt. IAM-Richtlinien
Für die Wiederherstellung aus einer geplanten Sicherung muss sich die Sicherung an einem Cloud Storage-Bucket.
Aus einer Sicherung wiederherstellen
Führen Sie folgende Schritte aus, um einen Dataproc Metastore-Dienst aus einer Sicherung wiederherzustellen: führen Sie die folgenden Schritte aus.
Wenn Sie die Google Cloud Console verwenden, können Sie Metadaten nur aus einem Sicherung, die im selben Projekt und in derselben Region erstellt wurde wie für Ihren neuen Dienst.
Wenn Sie die Google Cloud CLI oder Dataproc Metastore APIs verwenden, können Sie Metadaten aus einer Sicherung wiederherstellen, die in einem anderen Projekt erstellt wurde, und Region (dienstübergreifende Sicherung).
Console
Öffnen Sie in der Google Cloud Console die Seite Dataproc Metastore:
Klicken Sie auf der Seite Dataproc Metastore auf den Namen des Dienstes. die Sie aus einer Sicherung wiederherstellen möchten.
Die Seite Dienstdetails wird geöffnet.
<ph type="x-smartling-placeholder">Klicken Sie auf den Tab Backup/Wiederherstellung, um Ihre Sicherungen aufzurufen.
Wählen Sie die gewünschte Sicherung aus. Klicken Sie dazu auf das Menüsymbol
und wählen Sie Wiederherstellen.Die Seite Wiederherstellen wird geöffnet.
Sie können den Dienst auch auf der Seite Sicherungsdetails wiederherstellen. Klicken Sie dazu auf den Namen der Sicherung und dann auf Wiederherstellen.
Wählen Sie den entsprechenden Wiederherstellungsvorgang aus:
- Metastore-Daten wiederherstellen Stellt alle Metadaten wieder her, aber nicht wiederhergestellt die in der Sicherung gespeicherten Konfigurationseinstellungen
- Metastore-Daten und Dienstkonfiguration wiederherstellen Es werden alle Metadaten und sämtliche Konfigurationseinstellungen wiederhergestellt, die im Back-up.
Klicken Sie auf Wiederherstellen, um den Dienst zu aktualisieren.
Kehren Sie zur Seite Dataproc Metastore zurück und Überprüfen Sie, ob Ihr Dienst erfolgreich gesichert wurde.
Nach Abschluss der Wiederherstellung wird Dataproc Metastore automatisch in den Status "Aktiv" zurück, unabhängig davon, ob die Wiederherstellung war nicht erfolgreich.
gcloud-CLI
Führen Sie zum Wiederherstellen eines Dataproc Metastore-Dienstes den folgenden
gcloud metastore services restore
-Befehl:gcloud metastore services restore SERVICE \ --project=PROJECT_ID \ --location=LOCATION \ --backup=BACKUP \ --restore-type=RESTORE_TYPE \ --backup-location=BACKUP_LOCATION
Ersetzen Sie Folgendes:
SERVICE
: der Name Ihres Dataproc Metastore-DienstPROJECT_ID
: die Projekt-ID von Google Cloud Projekt, in dem sich Ihr Dataproc Metastoreservice befindet.LOCATION
: die Google Cloud-Region, in der Ihr sich der Dataproc Metastore-Dienst befindet.BACKUP
(optional): Kennung der Sicherungsdatei von dem Sie die Wiederherstellung durchführen. Dieser Wert kann die Sicherungs-ID, ein qualifizierte URL oder den relativen Namen im folgenden Format an:projects/{project_id}/locations/{location_id}/services/{service_id}/backups/{backup_id}
RESTORE_TYPE
: der Typ des Wiederherstellungsvorgangs die Sie ausführen können. Zulässige Werte sind „metadata-only
“ und „full
“. Der Standardwert istmetadata-only
.BACKUP_LOCATION
(optional): Der Cloud Storage Speicherort der geplanten Sicherung gespeichert. Beispiel:gs://my-bucket/path/to/location
Prüfen Sie, ob die Wiederherstellung erfolgreich war.
Nach Abschluss der Wiederherstellung wird Dataproc Metastore automatisch in den Status "Aktiv" zurück, unabhängig davon, ob die Wiederherstellung war nicht erfolgreich.
REST
Folgen Sie der API-Anleitung, um Metadaten in einem Dienst wiederherzustellen. mit APIs Explorer.
Nach Abschluss der Wiederherstellung wird Dataproc Metastore automatisch in den Status "Aktiv" zurück, unabhängig davon, ob die Wiederherstellung erfolgreich war.
Wiederherstellungsverlauf ansehen
So rufen Sie den Wiederherstellungsverlauf eines Dataproc Metastore-Dienstes in in der Google Cloud Console führen Sie die folgenden Schritte aus:
- Öffnen Sie in der Google Cloud Console Console den Dataproc Metastore. Seite.
Klicken Sie in der Navigationsleiste auf Backup/Restore (Sicherung/Wiederherstellung).
Der Wiederherstellungsverlauf wird in einer Tabelle unter Wiederherstellen angezeigt.
Im Verlauf werden maximal die 25 letzten Wiederherstellungen angezeigt, die Sie abgeschlossen haben.
Beim Löschen eines Dataproc Metastore-Dienstes werden auch zugehörigen Wiederherstellungsverlaufs.
Häufige Probleme beheben
- Der Dienst-Agent oder das Nutzerkonto hat nicht die erforderlichen Berechtigungen.
- Weitere Hilfe bei häufig auftretenden Problemen Siehe Fehlerszenarien beim Sichern und Wiederherstellen.