Datenübertragungen mit der Console erstellen und verwalten

Auf dieser Seite wird gezeigt, wie Sie mit der Google Cloud Console Übertragungsjobs einrichten und verwalten. Informationen zur programmatischen Arbeit mit Storage Transfer Service finden Sie unter Storage Transfer Service-Client erstellen und Datenübertragungen programmatisch erstellen und verwalten.

Vorbereitung

Führen Sie folgende Schritte aus, bevor Sie einen Übertragungsjob erstellen:

  1. Prüfen Sie, ob Sie Zugriff auf Storage Transfer Service haben. Dazu prüfen Sie, ob Ihnen eine der folgenden Rollen zugewiesen ist:

    • roles/owner
    • roles/editor
    • roles/storagetransfer.admin
    • roles/storagetransfer.user
    • Eine benutzerdefinierte Rolle, die mindestens die Berechtigung roles/storagetransfer.user umfasst

      Weitere Informationen zum Hinzufügen und Ansehen von Berechtigungen auf Projektebene finden Sie unter IAM-Berechtigungen mit Projekten verwenden.

    Weitere Informationen finden Sie unter Fehlerbehebung im Bereich Zugriff.

    Weitere Informationen zu IAM-Rollen und Berechtigungen in Storage Transfer Service finden Sie unter Zugriffssteuerung mit IAM-Rollen und -Berechtigungen.

  2. Zugriff auf Datenquellen und -senken konfigurieren.

Lokale Daten übertragen

Für die Übertragung lokaler Daten: bieten wir die folgenden Lösungen:

  • Für kleine Datasets können Sie gsutil rsync nutzen. Verwenden Sie gsutil rsync, um Daten zwischen Cloud Storage und anderen Cloud Storage-Anbietern oder zwischen Cloud Storage und Ihren lokalen Daten zu übertragen.

  • Für große Datasets können Sie Transfer Service for On Premises Data nutzen. Verwenden Sie Transfer Service for On Premises Data, um Daten zwischen Cloud Storage und Ihrem lokalen Speicher zu übertragen.

    Hier finden Sie weitere Informationen:

Übertragungsjob einrichten

  1. Rufen Sie in der Cloud Console die Seite Transfer Service für Cloud-Daten auf.

    Zu „Transfer Service für Cloud-Daten“

  2. Klicken Sie auf Übertragung erstellen.

  3. Wählen Sie eine Quelle aus:

    Cloud Storage

    Ihr Nutzerkonto muss die Berechtigung storage.buckets.get haben, um Quell- und Ziel-Buckets auszuwählen. Alternativ können Sie den Namen des Buckets direkt eingeben. Weitere Informationen finden Sie unter Zugriff auf die Fehlerbehebung.

    1. Wählen Sie unter Quelltyp die Option Google Cloud Storage-Bucket aus.

    2. Wählen Sie einen Bucket aus, indem Sie eine der folgenden Aktionen ausführen:

      • Geben Sie im Feld Bucket-Name einen vorhandenen Namen für einen Cloud Storage-Bucket ohne das Präfix gs:// ein. Wenn Sie einen Cloud Storage-Bucket aus einem anderen Projekt festlegen möchten, geben Sie den Namen in der exakten Schreibweise in das Feld Bucket-Name ein.

      • Wählen Sie eine Liste der vorhandenen Buckets in Ihren Projekten aus. Klicken Sie dazu auf Durchsuchen und wählen Sie einen Bucket aus.

        Wenn Sie auf Durchsuchen klicken, können Sie Buckets in anderen Projekten auswählen. Klicken Sie dazu auf Projekt-ID und wählen Sie die neue Projekt-ID und den Bucket aus.

      • Zum Erstellen eines neuen Buckets klicken Sie auf  Neuen Bucket erstellen.

    3. Optional: Wenn Sie Dateien in einen bestimmten Pfad einschließen möchten, geben Sie den Pfad in das Feld Ordnerpfad ein.

    4. Optional: Klicken Sie auf Präfix hinzufügen, um einen Teil der Dateien in der Quelle einzuschließen. Sie können Dateien basierend auf dem Dateinamenspräfix einschließen. Weitere Informationen finden Sie unter Quellobjekte zur Übertragung auswählen.
    5. Optional: Klicken Sie auf Erweiterte Filter, um weitere Filter auf die Übertragung anzuwenden. Die folgenden Elemente werden angezeigt:
      • Dateien ausschließen, die mit Folgendem beginnen: Schließt Dateien aus der Übertragung anhand des von Ihnen angegebenen Namenspräfixes aus. Klicken Sie auf Präfix hinzufügen, um ein Präfix anzugeben.
      • Nur Dateien einschließen, die zuletzt geändert wurden: Fügen Sie Dateien in die Übertragung ein, je nachdem, wann sie vor der Übertragung zuletzt geändert wurden.

        Sie können einen absoluten Zeitraum und einen relativen Zeitraum angeben. Ein relativer Zeitraum ist relativ zum Beginn der Übertragung.

    6. Klicken Sie auf Nächster Schritt.

    Amazon S3

    1. Wählen Sie unter Quelle auswählen die Option Amazon S3-Bucket aus.

    2. Geben Sie im Feld Bucket-Name den Namen des Quell-Buckets ein.

      Der Bucket-Name ist der Name, der in der AWS Management Console angezeigt wird.

    3. Wählen Sie Ihre AWS-Authentifizierungsmethode (Amazon Web Services) aus. Sie können einen AWS-Zugriffsschlüssel oder einen Amazon-Ressourcennamen (ARN) für die Identitätsföderation angeben:

      • Zugriffsschlüssel: Geben Sie Ihren Zugriffsschlüssel in das Feld Zugriffsschlüssel-ID und das Secret, das Ihrem Zugriffsschlüssel zu geordnet ist, im Feld Secret-Zugriffsschlüssel ein.

      • ARN: Geben Sie Ihren ARN in das Feld ARN der AWS-IAM-Rolle mit der folgenden Syntax ein:

        arn:aws:iam::ACCOUNT:role/ROLE-NAME-WITH-PATH
        

        Wobei:

        • ACCOUNT: Die AWS-Konto-ID ohne Bindestriche.
        • ROLE-NAME-WITH-PATH: Der Name der AWS-Rolle, einschließlich des Pfads.

        Weitere Informationen zu ARNs finden Sie unter IAM-ARNs.

      Weitere Informationen zu Amazon-Zugriffsschlüsseln finden Sie unter Amazon S3-Zugriffsschlüssel erstellen.

    4. Klicken Sie auf Next step (Nächster Schritt).

    5. Optional: Klicken Sie auf Präfix hinzufügen, um einen Teil der Dateien in der Quelle einzuschließen. Sie können Dateien basierend auf dem Dateinamenspräfix einschließen. Weitere Informationen finden Sie unter Quellobjekte zur Übertragung auswählen.
    6. Optional: Klicken Sie auf Erweiterte Filter, um weitere Filter auf die Übertragung anzuwenden. Die folgenden Elemente werden angezeigt:
      • Dateien ausschließen, die mit Folgendem beginnen: Schließt Dateien aus der Übertragung anhand des von Ihnen angegebenen Namenspräfixes aus. Klicken Sie auf Präfix hinzufügen, um ein Präfix anzugeben.
      • Nur Dateien einschließen, die zuletzt geändert wurden: Fügen Sie Dateien in die Übertragung ein, je nachdem, wann sie vor der Übertragung zuletzt geändert wurden.

        Sie können einen absoluten Zeitraum und einen relativen Zeitraum angeben. Ein relativer Zeitraum ist relativ zum Beginn der Übertragung.

    Microsoft Azure Blob Storage

    1. Wählen Sie unter Quelle auswählen die Option Azure Storage-Container aus.

    2. Geben Sie Folgendes an:

      1. Storage-Kontoname: der Name des Microsoft Azure Storage-Quellkontos.

        Der Name des Storage-Kontos wird im Microsoft Azure Storage-Portal unter Alle Dienste > Speicher > Speicherkonten angezeigt.

      2. Containername: der Name des Microsoft Azure Storage-Containers.

        Der Containername wird im Microsoft Azure Storage-Portal unter Speicher Explorer > Blob-Container angezeigt.

      3. Shared Access Signature (SAS): Das Microsoft Azure Storage-SAS-Token, das aus einer gespeicherten Zugriffsrichtlinie erstellt wurde. Weitere Informationen finden Sie unter Gewähren von eingeschränktem Zugriff auf Azure Storage-Ressourcen mithilfe von SAS (Shared Access Signature).

        Die Standardablaufzeit für SAS-Tokens beträgt 8 Stunden. Achten Sie bei der Erstellung des SAS-Tokens darauf, eine angemessene Ablaufzeit festzulegen, damit Sie die Übertragung erfolgreich abschließen können.
    3. Optional: Klicken Sie auf Präfix hinzufügen, um einen Teil der Dateien in der Quelle einzuschließen. Sie können Dateien basierend auf dem Dateinamenspräfix einschließen. Weitere Informationen finden Sie unter Quellobjekte zur Übertragung auswählen.
    4. Optional: Klicken Sie auf Erweiterte Filter, um weitere Filter auf die Übertragung anzuwenden. Die folgenden Elemente werden angezeigt:
      • Dateien ausschließen, die mit Folgendem beginnen: Schließt Dateien aus der Übertragung anhand des von Ihnen angegebenen Namenspräfixes aus. Klicken Sie auf Präfix hinzufügen, um ein Präfix anzugeben.
      • Nur Dateien einschließen, die zuletzt geändert wurden: Fügen Sie Dateien in die Übertragung ein, je nachdem, wann sie vor der Übertragung zuletzt geändert wurden.

        Sie können einen absoluten Zeitraum und einen relativen Zeitraum angeben. Ein relativer Zeitraum ist relativ zum Beginn der Übertragung.

    5. Klicken Sie auf Nächster Schritt.

    URL-Liste

    1. Wählen Sie unter Quelle auswählen die Option URL-Liste aus.

    2. Geben Sie unter URL der TSV-Datei die URL zu einer TSV-Datei (tabulatorgetrennte Werte) ein. Details zum Erstellen der TSV-Datei finden Sie unter URL-Liste erstellen.

    3. Optional: Klicken Sie auf Präfix hinzufügen, um einen Teil der Dateien in der Quelle einzuschließen. Sie können Dateien basierend auf dem Dateinamenspräfix einschließen. Weitere Informationen finden Sie unter Quellobjekte zur Übertragung auswählen.
    4. Optional: Klicken Sie auf Erweiterte Filter, um weitere Filter auf die Übertragung anzuwenden. Die folgenden Elemente werden angezeigt:
      • Dateien ausschließen, die mit Folgendem beginnen: Schließt Dateien aus der Übertragung anhand des von Ihnen angegebenen Namenspräfixes aus. Klicken Sie auf Präfix hinzufügen, um ein Präfix anzugeben.
      • Nur Dateien einschließen, die zuletzt geändert wurden: Fügen Sie Dateien in die Übertragung ein, je nachdem, wann sie vor der Übertragung zuletzt geändert wurden.

        Sie können einen absoluten Zeitraum und einen relativen Zeitraum angeben. Ein relativer Zeitraum ist relativ zum Beginn der Übertragung.

    5. Klicken Sie auf Nächster Schritt.

  4. Wählen Sie ein Ziel aus, indem Sie Folgendes ausführen:

    1. Geben Sie im Feld Bucket-Name den Namen des Ziel-Buckets ein oder klicken Sie auf Durchsuchen, um einen Bucket aus einer Liste der vorhandenen Buckets in Ihrem aktuellen Projekt auszuwählen. Klicken Sie zum Erstellen eines neuen Buckets auf  Neuen Bucket erstellen.

    2. Optional: Geben Sie im Feld Ordnerpfad den Pfad ein, um Dateien an einen bestimmten Pfad zu übertragen.

  5. Wählen Sie die Einstellungen für den Übertragungsjob mit den folgenden Schritten aus:

    1. Geben Sie im Feld Übertragungsjob beschreiben eine Beschreibung der Übertragung ein. Geben Sie als Best Practice eine aussagekräftige Beschreibung ein, damit Sie die Jobs unterscheiden können.

    2. Wählen Sie unter Wann überschreiben? eine der folgenden Optionen aus:

      • Falls unterschiedlich: Überschreibt Zieldateien, wenn die Quelldatei mit demselben Namen unterschiedliche ETags oder Prüfsummenwerte hat.

      • Immer: Zieldateien werden immer geschrieben, wenn die Quelldatei denselben Namen hat, auch wenn sie identisch sind.

    3. Wählen Sie unter Löschzeitpunkt eine der folgenden Optionen aus:

      • Nie: Dateien werden niemals aus der Quelle oder dem Ziel gelöscht.

      • Datei nach der Übertragung aus der Quelle löschen: Dateien werden aus der Quelle gelöscht, nachdem sie an das Ziel übertragen wurden.

      • Dateien aus dem Ziel löschen, wenn sie nicht auch in der Quelle sind: Wenn sich Dateien im Cloud Storage-Ziel-Bucket nicht auch in der Quelle befinden, löschen Sie die Dateien aus dem Cloud Storage-Bucket.

        Mit dieser Option wird sichergestellt, dass der Cloud Storage-Ziel-Bucket genau mit Ihrer Quelle übereinstimmt.

    4. Klicken Sie auf Nächster Schritt.

  6. Wählen Sie die gewünschten Zeitplanoptionen aus:

    1. Wählen Sie in der Drop-down-Liste Einmal ausführen eine der folgenden Optionen aus:

      • Einmal ausführen: Führt eine einzelne Übertragung aus, beginnend zu einem von Ihnen ausgewählten Zeitpunkt.

      • Täglich ausführen: Führt jeden Tag eine Übertragung zu einem von Ihnen ausgewählten Zeitpunkt aus.

        Sie können ein optionales Enddatum eingeben oder Enddatum leer lassen, um die Übertragung kontinuierlich auszuführen.

      • Jede Woche ausführen: Führt eine Übertragung wöchentlich aus, beginnend zu einem von Ihnen ausgewählten Zeitpunkt.

      • Mit benutzerdefinierter Frequenz ausführen: Führt eine Übertragung mit der von Ihnen ausgewählten Häufigkeit wird aus. Sie können die Übertragung in regelmäßigen Abständen gemessen in Stunden, Tagen oder Wochen wiederholen.

        Sie können ein optionales Enddatum eingeben oder Enddatum leer lassen, um die Übertragung kontinuierlich auszuführen.

    2. Wählen Sie in der Drop-down-Liste Jetzt starten eine der folgenden Optionen aus:

      • Jetzt starten: Damit wird die Übertragung gestartet, nachdem Sie auf Erstellen geklickt haben.

      • Ab dem: Die Übertragung wird an dem ausgewählten Datum und zur ausgewählten Uhrzeit gestartet. Klicken Sie auf Kalender, um einen Kalender aufzurufen und das Startdatum auszuwählen.

    3. Klicken Sie zum Erstellen des Übertragungsjobs auf Erstellen.

Details zum Übertragungsjob ansehen

Sie können sich die folgenden Jobdetails in der Cloud Console ansehen:

  • Jobbeschreibung und Name
  • Quelltyp und Speicherort
  • Zielspeicherort
  • Jobhäufigkeit
  • Jobstatistiken

So rufen Sie Details zu Übertragungsjobs auf:

  1. Rufen Sie in der Cloud Console die Seite Transfer Service für Cloud-Daten auf.

    Zu „Transfer Service für Cloud-Daten“

  2. Klicken Sie auf die Beschreibung des Übertragungsjobs.

    Die Seite Jobdetails wird angezeigt.

Übertragungsjob von einer vorhandenen Konfiguration ausführen

Sie können einen Übertragungsjob von einer vorhandenen Übertragungskonfiguration ausführen. So können Sie einen Übertragungsjob mit zuvor verwendeten Einstellungen noch einmal ausführen.

So führen Sie eine Übertragung von einer vorhandenen Konfiguration aus:

  1. Rufen Sie in der Cloud Console die Seite Transfer Service für Cloud-Daten auf.

    Zu „Transfer Service für Cloud-Daten“

  2. Klicken Sie auf die Beschreibung des Übertragungsjobs.

    Die Seite Jobdetails wird angezeigt.

  3. Klicken Sie zum Starten eines Übertragungsjobs auf Ausführung starten.

Alternativ können Sie eine vorhandene Übertragungskonfiguration bearbeiten, um neue Einstellungen zu verwenden. Weitere Informationen finden Sie unter Vorhandene Übertragungskonfiguration bearbeiten.

Vorhandene Übertragungskonfiguration bearbeiten

Sie können eine vorhandene Übertragungskonfiguration bearbeiten, um die Übertragung an Ihre Anforderungen anzupassen. Sie können die folgenden Elemente einer vorhandenen Übertragungskonfiguration bearbeiten:

  • Die Beschreibung des Übertragungsjobs
  • Microsoft Azure Blob Storage- oder Amazon S3-Quellanmeldedaten
  • Alle Filter, die auf den Übertragungsjob angewendet wurden
  • Optionen zum Überschreiben oder Löschen von Dateien
  • Der Zeitplan des Übertragungsjobs

So bearbeiten Sie einen Übertragungsjob:

  1. Rufen Sie in der Cloud Console die Seite Transfer Service für Cloud-Daten auf.

    Zu „Transfer Service für Cloud-Daten“

  2. Klicken Sie auf die Beschreibung des Übertragungsjobs.

    Die Seite Jobdetails wird angezeigt.

  3. Klicken Sie auf Konfiguration.

    Die Konfiguration des Übertragungsjobs wird angezeigt.

  4. Zum Ändern eines Elements klicken Sie neben dem Element auf Bearbeiten.

  5. Klicken Sie auf Ausführung starten, um einen Job mit den Änderungen zu starten.

Übertragungsjob löschen

Sie können nicht mehr benötigte Übertragungsjobs löschen. Das Löschen eines Jobs sorgt auch für Folgendes:

  • Beendet alle vorhandenen Übertragungen, die Teil des Jobs sind
  • Beendet alle wiederkehrenden Übertragungen, die zum Job gehören
  • Löscht die Konfigurationsdetails des Jobs

Das Löschen eines Jobs ist endgültig. Wenn Sie den Übertragungsjob löschen, wird er aus der Liste der Übertragungsjobs entfernt. Die Informationen zu Übertragungsjobs werden nach 30 Tagen vollständig aus Storage Transfer Service gelöscht.

Alternativ können Sie den Übertragungsjob deaktivieren, wodurch der Job auf der Seite Jobs beibehalten wird und Sie ihn wieder aktivieren oder ändern können.

So löschen Sie einen Übertragungsjob:

  1. Rufen Sie in der Cloud Console die Seite Transfer Service für Cloud-Daten auf.

    Zu „Transfer Service für Cloud-Daten“

  2. Klicken Sie das Kästchen neben dem Übertragungsjob an, den Sie löschen möchten.

  3. Klicken Sie auf Job löschen.

    Das Dialogfeld Übertragungsjob löschen? wird angezeigt.

  4. Lesen Sie das Dialogfeld und bestätigen Sie das Löschen des Jobs, indem Sie den automatisch zugewiesenen Namen des Jobs in das Feld eingeben und auf Löschen klicken.

    Der Job wird von der Seite Jobs entfernt.

Übertragungsjob deaktivieren

Nach dem Deaktivieren eines Übertragungsjobs startet der Übertragungsjob keine weiteren Übertragungsvorgänge mehr, einschließlich künftigen geplanten Vorgängen oder Vorgängen, die manuell über die Schaltfläche Ausführung starten gestartet wurden.

So deaktivieren Sie einen Übertragungsjob:

  1. Rufen Sie in der Cloud Console die Seite Transfer Service für Cloud-Daten auf.

    Zu „Transfer Service für Cloud-Daten“

  2. Klicken Sie auf die Beschreibung des Übertragungsjobs.

    Die Seite Jobdetails wird angezeigt.

  3. Klicken Sie auf Job deaktivieren. Das Dialogfeld Übertragungsjob deaktivieren? wird angezeigt.

  4. Lesen Sie das Dialogfeld und bestätigen Sie die Deaktivierung des Jobs, indem Sie auf Bestätigen klicken.

    Oben auf der Seite Jobdetails wird ein Hinweis angezeigt, der Sie darauf hinweist, dass der Job deaktiviert ist.

Übertragungsjob pausieren

Sie können eine aktuell laufende Übertragung pausieren. Wenn Sie die Übertragung pausieren, wird der Jobstatus beibehalten und Sie können sie später wieder aktivieren. Während eine Übertragung pausiert wird, wird der Job durch den Zeitplan nicht noch einmal ausgelöst.

So pausieren Sie einen Übertragungsjob:

  1. Rufen Sie in der Cloud Console die Seite Transfer Service für Cloud-Daten auf.

    Zu „Transfer Service für Cloud-Daten“

  2. Klicken Sie auf die Beschreibung des Übertragungsjobs.

    Die Seite Jobdetails wird angezeigt.

  3. Klicken Sie auf Ausführung pausieren.

    Der Status des aktuellen Vorgangs wird als Pausiert angezeigt.

Pausierten Übertragungsjob neu starten

Sie können einen pausierten Übertragungsjobs wieder aktivieren, wodurch der Job an der Stelle neu gestartet wird, an der er pausiert wurde.

So heben Sie die Pausierung eines Übertragungsjobs auf:

  1. Rufen Sie in der Cloud Console die Seite Transfer Service für Cloud-Daten auf.

    Zu „Transfer Service für Cloud-Daten“

  2. Klicken Sie auf die Beschreibung des Übertragungsjobs.

    Die Seite Jobdetails wird angezeigt.

  3. Klicken Sie auf Ausführung fortsetzen.

    Der Status des aktuellen Vorgangs wird als In Bearbeitung angezeigt.

Verlaufsstatusinformationen eines Jobs ansehen

Sie können sich die Verlaufsstatusinformationen für die Ausführung von Übertragungsjobs ansehen. Folgende Jobinformationen sind verfügbar:

  • Transferstatus
  • Beginn und Ende
  • Dauer
  • Fortschritt
  • Übertragene Daten
  • Anzahl der Fehler
  • Übersprungene Daten
  • Geschätzte durchschnittliche Geschwindigkeit

So rufen Sie die Verlaufsstatusinformationen eines Übertragungsjobs auf:

  1. Rufen Sie in der Cloud Console die Seite Transfer Service für Cloud-Daten auf.

    Zu „Transfer Service für Cloud-Daten“

  2. Klicken Sie auf die Beschreibung des Übertragungsjobs.

    Die Seite Jobdetails wird angezeigt.

  3. Klicken Sie auf Beginn, um die Details einer bestimmten Ausführung anzuzeigen.

    Die Seite Ausführungsdetails wird angezeigt.

Jobfehlerdetails ansehen

Wenn bei einer Übertragungsausführung Fehler auftreten, können Sie sich Fehlerdetails ansehen, um den Fehler zu beheben.

So können Sie Fehlerdetails für eine Übertragungsjobausführung anzeigen lassen:

  1. Rufen Sie in der Cloud Console die Seite Transfer Service für Cloud-Daten auf.

    Zu „Transfer Service für Cloud-Daten“

  2. Klicken Sie auf die Beschreibung des Übertragungsjobs.

    Die Seite Jobdetails wird angezeigt.

  3. Führen Sie einen der folgenden Schritte aus, um Jobdetails aufzurufen:

    • Letzte Jobausführung:

      1. Klicken Sie entweder auf die Schaltfläche Fehlerdetails aufrufen oder auf den Link Fehlerdetails ansehen.

        Die Seite Fehlerdetails wird angezeigt.

    • Bisherige Jobausführung: Führen Sie folgende Schritte aus:

      1. Klicken Sie auf den Beginn der Jobausführung.

        Die Seite Ausführungsdetails wird angezeigt.

      2. Klicken Sie auf den Link Fehlerdetails ansehen.

        Die Seite Fehlerdetails wird angezeigt.

  4. Klicken Sie auf Mehr anzeigen, um zusätzliche Details zu jedem angezeigten Fehler anzuzeigen.

  5. Geben Sie zum Filtern entsprechende Attribute im Feld Name oder Wert des Attributs eingeben ein.

    Wenn Sie den Cursor in das Feld setzen, wird ein Drop-down-Menü mit relevanten Optionen zum Erstellen Ihres Filters angezeigt.

Quellobjekte zur Übertragung auswählen

Storage Transfer Service verfügt über Präfixe, mit denen Sie auswählen können, welche Dateien aus der Datenquelle übertragen bzw. von der Übertragung ausgeschlossen werden sollen. Sie können sich die Präfixe wie einen Filter vorstellen, der die Auswahl der zu übertragenden Objekte eingrenzt. Sie können entweder nur einschließende Präfixe, nur ausschließende Präfixe oder beides verwenden. Die folgenden Anleitungen gelten für die Datenquellen Amazon S3, Microsoft Azure Blob Storage und Cloud Storage.

  • Lassen Sie bei der Eingabe eines Präfixes den Schrägstrich am Anfang weg. Wenn Sie beispielsweise das Objekt requests.gz in eine Übertragung aus dem Bucket-Pfad s3://my-aws-bucket/logs/y=2015/requests.gz aufnehmen möchten, geben Sie das einschließende Präfix als logs/y=2015/requests.gz an.

  • Wenn Sie einschließende und ausschließende Präfixe zusammen verwenden, müssen die ausschließenden Präfixe mit dem Wert eines der einschließenden Präfixe beginnen. Beispiel: Wenn Sie a als einschließendes Präfix festlegen, können die ausschließenden Präfixe z. B. a/b, aaa oder abc lauten.

  • Wenn Sie nur ausschließende Präfixe verwenden, können Sie beliebige Präfixwerte festlegen.

  • Wenn Sie keine Präfixe angeben, werden alle Objekte übertragen, die sich im Bucket befinden.

  • Geben Sie für die Namen der Datenquelle und des Datensenken-Buckets keine Pfadnamen an. Beispiel: s3://my-aws-bucket und gs://example-bucket sind gültig, s3://my-aws-bucket/subfolder oder gs://example-bucket/files jedoch nicht. Verwenden Sie einschließende und ausschließende Präfixe, um Pfade anzugeben.

  • Storage Transfer Service unterstützt keine Neuzuordnungen. Sie können also den Pfad files/2015 in der Datenquelle nicht in files/2016 in der Datensenke kopieren.

Weitere Informationen zur Verwendung von einschließenden und ausschließenden Präfixen finden Sie in den Feldbeschreibungen includePrefixes und excludePrefixes in der API.

Allgemeine Informationen zu Präfixen finden Sie in der Amazon S3-Dokumentation unter Hierarchische Auflistung von Schlüsseln mit einem Präfix und einem Trennzeichen oder in der Objektlistemethode für Cloud Storage.

Zugriffsschlüssel erstellen

Die folgenden Schritte bieten einen Überblick über die Erstellung von Amazon S3-Zugriffsschlüssel-Anmeldedaten, die für Datenübertragungen von einem Amazon S3-Bucket in einen Cloud Storage-Bucket verwendet werden können. Ausführliche Informationen finden Sie unter Creating an IAM User in Your AWS Account und Bucket Policy Examples.

Informationen zu unseren Aufbewahrungsrichtlinien für Nutzeranmeldedaten finden Sie unter Nutzeranmeldedaten.

  1. Erstellen Sie einen neuen Nutzer in der AWS IAM-Konsole (Identity and Access Management).

  2. Notieren Sie sich die Anmeldedaten für den Zugriff oder laden Sie sie herunter.

    Die heruntergeladenen Anmeldedaten enthalten den Benutzernamen, die Zugriffsschlüssel-ID und den geheimen Zugriffsschlüssel. Wenn Sie den Übertragungsjob in Cloud Storage konfigurieren, benötigen Sie lediglich die Zugriffsschlüssel-ID und den geheimen Zugriffsschlüssel.

  3. Verknüpfen Sie den IAM-Nutzer mit einer verwalteten Richtlinie, die die zum Ausführen einer Übertragung erforderlichen Berechtigungen enthält.

    Verknüpfen Sie die Richtlinie AmazonS3FullAccess, wenn die Übertragung für das Löschen von Quellobjekten konfiguriert wurde. Ansonsten fügen Sie die AmazonS3ReadyOnlyAccess-Richtlinie hinzu. Die verwaltete Richtlinie AmazonS3FullAccess, die über die IAM-Konsole mit einem Nutzer verknüpft ist, lautet beispielsweise:

    {
      "Version": "2012-10-17",
      "Statement": [
        {
          "Effect": "Allow",
          "Action": "s3:*",
          "Resource": "*"
        }
      ]
    }
    
  4. Optional können Sie eine Richtlinie erstellen, die restriktiver als die verwalteten Richtlinien ist.

    Zum Beispiel können Sie eine Richtlinie erstellen, die den Zugriff nur auf den Amazon S3-Bucket beschränkt. Weitere Informationen finden Sie unter Bucket Policy Examples.

Nächste Schritte

Mehr zur Arbeit mit Cloud Storage