Indexe verwalten

Firestore gewährleistet die Abfrageleistung durch verbindliche Verwendung von Indexen für jede Abfrage. Die für grundlegende Abfragen erforderlichen Indexe werden automatisch erstellt. Während Sie Ihre Anwendung verwenden und testen, zeigt Cloud Firestore Fehlermeldungen an, mit deren Hilfe Sie zusätzliche Indexe erstellen können, die für Ihre Anwendung erforderlich sind. Auf dieser Seite wird beschrieben, wie Sie Ihre Einzelfeldindexe, zusammengesetzten Indexe und [vector][vector]-Indexe verwalten.

Fehlenden Index über eine Fehlermeldung erstellen

Wenn Sie versuchen, eine kumulierende Abfrage mit einer Bereichsklausel auszuführen, die keinem vorhandenen Index zugeordnet ist, erhalten Sie einen Fehler. Die Fehlermeldung enthält einen direkten Link zum Erstellen des fehlenden Index in der Firebase Console.

Folgen Sie dem erstellten Link zur Firebase Console, prüfen Sie die automatisch ausgefüllten Informationen und klicken Sie auf Erstellen.

Falls ein Vektorindex erforderlich ist, enthält die Fehlermeldung einen Google Cloud CLI-Befehl zum Erstellen des fehlenden Vektorindexes. Führen Sie den Befehl aus, um den fehlenden Index zu erstellen.

Rollen und Berechtigungen

Bevor Sie einen Index in Firestore erstellen können, müssen Sie eine der folgenden Rollen haben:

  • roles/datastore.owner
  • roles/datastore.indexAdmin
  • roles/editor
  • roles/owner

Wenn Sie benutzerdefinierte Rollen definiert haben, weisen Sie alle folgenden Berechtigungen zum Erstellen von Indexen zu:

  • datastore.indexes.create
  • datastore.indexes.delete
  • datastore.indexes.get
  • datastore.indexes.list
  • datastore.indexes.update

Google Cloud Platform Console verwenden

Über die Google Cloud Platform Console können Sie Einzelfeldindex-Ausnahmen sowie zusammengesetzte Indexe verwalten.

Zusammengesetzten Index erstellen

So erstellen Sie manuell einen neuen zusammengesetzten Index über die GCP Console:

  1. Rufen Sie in der Google Cloud Console die Seite Datenbanken auf.

    Zur Seite „Datenbanken“

  2. Wählen Sie die benötigte Datenbank aus der Liste der Datenbanken aus.

  3. Klicken Sie im Navigationsmenü auf Indexe und dann auf den Tab Komposit.

  4. Klicken Sie auf Index erstellen.

  5. Geben Sie eine Sammlungs-ID ein. Fügen Sie die Namen der Felder, die Sie indexieren möchten, sowie einen Indexmodus für jedes Feld hinzu. Klicken Sie auf Index speichern.

Ihr neuer Index wird in der Liste der zusammengesetzten Indexe angezeigt und Firestore beginnt mit dem Erstellen des Index. Wenn der Index angelegt ist, wird neben dem Index ein grünes Häkchen angezeigt.

Zusammengesetzten Index löschen

So löschen Sie einen zusammengesetzten Index:

  1. Rufen Sie in der Google Cloud Console die Seite Datenbanken auf.

    Zur Seite „Datenbanken“

  2. Wählen Sie die benötigte Datenbank aus der Liste der Datenbanken aus.

  3. Klicken Sie im Navigationsmenü auf Indexe und dann auf den Tab Komposit.

  4. Klicken Sie in der Liste Ihrer zusammengesetzten Indexe auf die Schaltfläche Mehr für den Index, den Sie löschen möchten. Klicken Sie auf Löschen.

  5. Bestätigen Sie, dass dieser Index gelöscht werden soll. Klicken Sie dafür in der Benachrichtigung auf Index löschen.

Einzelfeldindex-Ausnahme hinzufügen

Mit Einzelfeldindex-Ausnahmen können Sie die Einstellungen für die automatische Indexierung für bestimmte Felder in einer Sammlung überschreiben. Sie können Ausnahmen für Einzelfelder über die Console hinzufügen:

  1. Rufen Sie in der Google Cloud Console die Seite Datenbanken auf.

    Zur Seite „Datenbanken“

  2. Wählen Sie die benötigte Datenbank aus der Liste der Datenbanken aus.

  3. Klicken Sie im Navigationsmenü auf Indexe und dann auf den Tab Einzelnes Feld.

  4. Klicken Sie auf Ausnahme hinzufügen.

  5. Geben Sie eine Sammlungs-ID und einen Feldpfad ein.

  6. Wählen Sie neue Indexierungseinstellungen für dieses Feld aus. Aktivieren oder deaktivieren Sie für dieses Feld automatisch aktualisierte aufsteigende, absteigende und "array-contains"-Einzelfeldindexe.

  7. Klicken Sie auf Ausnahme speichern.

Ausnahme auf Sammlungsebene hinzufügen

So definieren Sie eine Einzelfeldindex-Ausnahme, die für alle Felder unter einer Sammlungs-ID gilt:

  1. Klicken Sie auf Ausnahme hinzufügen.
  2. Geben Sie eine Sammlungs-ID für die Sammlungsgruppe ein und legen Sie * als Feldpfad fest.

    Feld auswählen, für das eine Ausnahme gelten soll

  3. Wählen Sie die Indexierungsausnahmen aus, die Sie auf alle Felder in der Sammlungsgruppe anwenden möchten.

  4. Klicken Sie auf Ausnahme speichern.

Einzelfeldindex-Ausnahme löschen

So löschen Sie eine Einzelfeldindex-Ausnahme:

  1. Rufen Sie in der Google Cloud Console die Seite Datenbanken auf.

    Zur Seite „Datenbanken“

  2. Wählen Sie die benötigte Datenbank aus der Liste der Datenbanken aus.

  3. Klicken Sie im Navigationsmenü auf Indexe und dann auf den Tab Einzelnes Feld.

  4. Klicken Sie in der Liste der Einzelfeldindex-Ausnahmen auf die Schaltfläche Mehr für die Ausnahme, die Sie löschen möchten. Klicken Sie auf Löschen.

  5. Bestätigen Sie, dass Sie diese Ausnahme löschen möchten. Klicken Sie dafür in der Benachrichtigung auf Löschen.

Wenn Sie eine Einzelfeldausnahme löschen, werden für das angegebene Feld oder Unterfeld die übernommenen Indexierungseinstellungen verwendet. Dokumentfelder werden auf die Einstellungen Ihrer Datenbank für die automatische Indexierung zurückgesetzt. Für Unterfelder in einer Karte werden alle Ausnahmen der übergeordneten Felder übernommen, bevor die Einstellungen für die automatische Indexierung übernommen werden.

Firebase CLI verwenden

Sie können Indexe auch mit Firebase CLI bereitstellen. Führen Sie zuerst firebase init firestore in Ihrem Projektverzeichnis aus. Während der Einrichtung erstellt Firebase CLI eine JSON-Datei mit den Standardindexen im richtigen Format. Bearbeiten Sie die Datei, um weitere Indexe hinzuzufügen, und stellen Sie sie mit dem Befehl firebase deploy bereit.

Wenn Sie nur Firestore-Indexe und ‑Regeln bereitstellen möchten, fügen Sie das Flag --only firestore hinzu.

Wenn Sie mithilfe der Firebase Console Änderungen an den Indexen vornehmen, denken Sie daran, auch die lokale Indexdatei zu aktualisieren. Weitere Informationen finden Sie in der Referenz zur JSON-Indexdefinition.

Terraform verwenden

Indexe in der Datenbank erstellen

Firestore-Datenbanken können sowohl Einzelfeld- als auch zusammengesetzte Indexe enthalten. Sie können die Terraform-Konfigurationsdatei bearbeiten, um einen Index für Ihre Datenbank zu erstellen. Für Einzelfeld- und zusammengesetzte Indexe werden unterschiedliche Terraform-Ressourcentypen verwendet (google_firestore_index und google_firestore_field).

Sowohl Indizes im Firestore-nativen Modus als auch im Datastore-Modus werden unterstützt.

Einzelfeldindex

In der folgenden Beispiel-Terraform-Konfigurationsdatei wird ein Index mit einem einzelnen Feld für das Feld name in der Sammlung chatrooms erstellt:

firestore.tf

resource "random_id" "variable"{
  byte_length = 8
}

resource "google_firestore_field" "single-index" {
  project = "project-id"
  database = "database-id"
  collection = "chatrooms_${random_id.variable.hex}"
  field = "name"

  index_config {
    indexes {
        order = "ASCENDING"
        query_scope = "COLLECTION_GROUP"
    }
    indexes {
        array_config = "CONTAINS"
    }
  }

  ttl_config {}
}
  • Ersetzen Sie project-id durch Ihre Projekt-ID. Projekt-IDs müssen eindeutig sein.
  • Ersetzen Sie database-id durch Ihre Datenbank-ID.

Zusammengesetzter Index

In der folgenden Beispiel-Terraform-Konfigurationsdatei wird ein zusammengesetzter Index für eine Kombination aus dem Feld name und dem Feld description in der Sammlung chatrooms erstellt:

firestore.tf

resource "google_firestore_index" "composite-index" {
  project = "project-id"
  database = "database-id"

  collection = "chatrooms"

  fields {
    field_path = "name"
    order      = "ASCENDING"
  }

  fields {
    field_path = "description"
    order      = "DESCENDING"
  }

}
  • Ersetzen Sie project-id durch Ihre Projekt-ID. Projekt-IDs müssen eindeutig sein.
  • Ersetzen Sie database-id durch Ihre Datenbank-ID.

Vektorindex

In der folgenden Beispiel-Terraform-Konfigurationsdatei wird ein Vektorindex für das Feld embedding in der Sammlung chatrooms erstellt:

firestore.tf

resource "google_firestore_index" "vector-index" {
  project = "project-id"
  database = "database-id"
  collection = "chatrooms"

  fields {
    field_path = "__name__"
    order = "ASCENDING"
  }

  fields {
    field_path = "embedding"
    vector_config {
      dimension = 128
      flat {}
    }
  }
}
  • Ersetzen Sie project-id durch Ihre Projekt-ID. Projekt-IDs müssen eindeutig sein.
  • Ersetzen Sie database-id durch Ihre Datenbank-ID.

Indexe im Datastore-Modus

Sie können Indexe im Datenspeichermodus auch mit Terraform erstellen.

datastore.tf

resource "google_firestore_index" "datastore-mode-index" {
  project = "project-id"
  database = "database-id"

  collection = "chatrooms"

  fields {
    field_path = "name"
    order      = "ASCENDING"
  }

  fields {
    field_path = "description"
    order      = "DESCENDING"
  }

  query_scope = "COLLECTION_GROUP"
  api_scope   = "DATASTORE_MODE_API"
}
Von google_datastore_index migrieren

Die google_datastore_index-Ressource wird eingestellt und ist ab terraform-provider-google Version 6.0.0 nicht mehr verfügbar.

Wenn Sie zuvor die Ressource google_datastore_index verwendet haben, können Sie zu google_firestore_index migrieren. So führen Sie die Migration durch:

  1. Eine äquivalente google_firestore_index-Ressource schreiben
  2. Importieren Sie den vorhandenen Index im Datastore-Modus in die neue Ressource.
  3. Entfernen Sie Verweise auf die alte google_datastore_index-Ressource.
  4. Entfernen Sie die alte google_datastore_index-Ressource aus dem Terraform-Status.
  5. Durch Eingabe von terraform apply werden alle Änderungen übernommen.

Eine ausführlichere Anleitung findest du hier:

  1. Erstellen Sie eine Ersatz-google_firestore_index basierend auf Ihrer vorhandenen google_datastore_index-Ressource. Die erforderlichen Änderungen finden Sie unten.
  2. Ermitteln Sie den Firestore-Ressourcenpfad Ihres Index:

    export INDEX_RESOURCE_PATH=$(echo '"projects/${google_datastore_index.datastore-index-resource-name.project}/databases/(default)/collectionGroups/${google_datastore_index.datastore-index-resource-name.kind}/indexes/${google_datastore_index.datastore-index-resource-name.index_id}"' | terraform console | tr -d '"')
    

    Ersetzen Sie datastore-index-resource-name durch den Terraform-Namen Ihrer vorhandenen Ressource.

  3. Importieren Sie den vorhandenen Index im Datastore-Modus in die oben erstellte google_firestore_index-Ressource:

    terraform import google_firestore_index.firestore-index-resource-name $INDEX_RESOURCE_PATH
    

    Ersetzen Sie firestore-index-resource-name durch den Terraform-Namen Ihrer vorhandenen Ressource.

    Weitere Informationen zum Importieren von Firestore-Indexressourcen finden Sie in der Referenzdokumentation zu google_firestore_index.

  4. Löschen Sie die vorhandene google_datastore_index-Ressource aus der Terraform-Konfigurationsdatei.
  5. Entfernen Sie die vorhandene google_datastore_index-Ressource aus dem Terraform-Status:

    terraform state rm google_datastore_index.datastore-index-resource-name
    

    Weitere Informationen zum Entfernen von Ressourcen finden Sie auf der Terraform-Seite Ressourcen entfernen.

  6. Führen Sie terraform plan aus. Prüfen Sie die Ausgabe, um sicherzustellen, dass keine Ressourcen erstellt oder gelöscht werden.

    Prüfen Sie die Ausgabe, um sicherzustellen, dass der Import erfolgreich abgeschlossen wurde. Wenn in der Ausgabe Felder geändert werden, prüfen Sie, ob diese Änderungen beabsichtigt sind. Wenn die Ausgabe eine Zeile enthält, die in etwa so aussieht:

    google_firestore_index.firestore-index-resource-name must be replaced
    

    Prüfen Sie dann Ihre Terraform-Konfigurationsdatei, um festzustellen, ob Fehler aufgetreten sind.

  7. Wenn Sie mit der Ausgabe des Terraform-Plans zufrieden sind, führen Sie Folgendes aus:

    terraform apply
    

  8. Index übersetzen

    Wenn Sie eine google_datastore_index-Ressource in die entsprechende google_firestore_index-Ressource umwandeln möchten, kopieren Sie sie und nehmen Sie die folgenden Änderungen vor:

    • Ersetzen Sie google_datastore_index durch google_firestore_index.
    • Ersetzen Sie den Argumentnamen kind durch collection, lassen Sie aber den Argumentwert unverändert.
    • Ersetzen Sie den Argumentnamen ancestor durch query_scope. Ersetzen Sie den Argumentwert ALL_ANCESTORS durch COLLECTION_RECURSIVE und alle anderen Werte durch COLLECTION_GROUP. Wenn kein ancestor-Argument vorhanden war, fügen Sie ein query_scope-Argument mit dem Wert COLLECTION_GROUP hinzu.
    • Fügen Sie das Argument api_scope mit dem Wert DATASTORE_MODE_API hinzu.
    • Ersetzen Sie jede Instanz von properties durch eine entsprechende Instanz von fields. Ersetzen Sie jede Instanz von name durch field_path und jede Instanz von direction durch order.

    Betrachten wir beispielsweise diese google_datastore_index-Ressource:

    datastore.tf

    resource "google_datastore_index" "legacy" {
      kind = "foo"
    
      properties {
        name = "property_a"
        direction = "ASCENDING"
      }
    
      properties {
        name = "property_b"
        direction = "ASCENDING"
      }
    }
    

    Die entsprechende google_firestore_index-Ressource wäre:

    resource "google_firestore_index" "new" {
      // note: defaults to the provider project
      project = project
    
      // note: defaults to the (default) database
      database = "(default)"
    
      collection = "foo"
    
      api_scope = "DATASTORE_MODE_API"
    
      // since there was no "ancestor" property set above, use COLLECTION_GROUP here
      query_scope = "COLLECTION_GROUP"
    
      fields {
        field_path = "property_a"
        order  = "ASCENDING"
      }
    
      fields {
        field_path = "property_b"
        order = "ASCENDING"
      }
    }
    

    Indexerstellungszeit

    Zum Erstellen eines Indexes muss Firestore den Index einrichten und diesen anschließend mit vorhandenen Daten füllen. Die Indexerstellungszeit ergibt sich aus der Summe der Einrichtungs- und der Backfill-Zeit:

    • Die Einrichtung eines Index dauert einige Minuten. Die Mindesterstellungszeit für einen Index beträgt einige Minuten, auch bei einer leeren Datenbank.

    • Die Dauer des Backfill hängt davon ab, wie viele vorhandene Daten in den neuen Index gehören. Je mehr Feldwerte mit der Indexdefinition übereinstimmen, desto länger dauert es, bis der Index befüllt ist.

    Index-Builds sind Vorgänge mit langer Ausführungszeit.

    Nachdem Sie einen Index-Build gestartet haben, weist Firestore dem Vorgang einen eindeutigen Namen zu. Vorgangsnamen haben das Präfix projects/[PROJECT_ID]/databases/(default)/operations/, zum Beispiel:

    projects/project-id/databases/(default)/operations/ASA1MTAwNDQxNAgadGx1YWZlZAcSeWx0aGdpbi1zYm9qLW5pbWRhEgopEg
    

    Wenn Sie für den Befehl describe einen Vorgangsnamen angeben, können Sie das Präfix weglassen.

    Lang andauernde Vorgänge auflisten

    Verwenden Sie zum Auflisten lang andauernder Vorgänge den Befehl gcloud firestore operations list. Dieser Befehl listet laufende und kürzlich abgeschlossene Vorgänge auf. Die Vorgänge sind nach Abschluss einige Tage lang in der Liste enthalten:

    gcloud firestore operations list
    

    Vorgangsstatus prüfen

    Anstelle aller Vorgänge mit langer Ausführungszeit können Sie auch die Details eines einzelnen Vorgangs auflisten:

    gcloud firestore operations describe operation-name

    Fertigstellungszeit schätzen

    Während der Ausführung eines Vorgangs wird im Feld state der Gesamtstatus des Vorgangs angezeigt.

    Eine Anfrage für den Status eines Vorgangs mit langer Ausführungszeit gibt auch die Messwerte workEstimated und workCompleted zurück. Diese Messwerte werden für die Anzahl der Dokumente zurückgegeben. workEstimated gibt die geschätzte Gesamtzahl der Dokumente an, die ein Vorgang verarbeitet. workCompleted gibt die Anzahl der bisher verarbeiteten Dokumente an. Nach Abschluss des Vorgangs gibt workCompleted die Gesamtzahl der tatsächlich verarbeiteten Dokumente wieder, die sich vom Wert von workEstimated unterscheiden können.

    Teilen Sie workCompleted durch workEstimated, um eine grobe Schätzung des Fortschritts zu erhalten. Die Schätzung ist möglicherweise ungenau, da sie von der verzögerten Statistikerfassung abhängt.

    Dies ist der Fortschrittsstatus eines Index-Builds:

    {
      "operations": [
        {
          "name": "projects/project-id/operations/AyAyMDBiM2U5NTgwZDAtZGIyYi0zYjc0LTIzYWEtZjg1ZGdWFmZWQHEjF0c2Flc3UtcmV4ZWRuaS1uaW1kYRUKSBI",
          "metadata": {
            "@type": "type.googleapis.com/google.firestore.admin.v1.IndexOperationMetadata",
            "common": {
              "operationType": "CREATE_INDEX",
              "startTime": "2020-06-23T16:52:25.697539Z",
              "state": "PROCESSING"
            },
            "progressDocuments": {
              "workCompleted": "219327",
              "workEstimated": "2198182"
            }
           },
        },
        ...
    

    Wenn ein Vorgang abgeschlossen ist, enthält die Vorgangsbeschreibung "done": true. Der Wert des Feldes state stellt das Ergebnis des Vorgangs dar. Wenn das Feld done nicht in der Antwort festgelegt ist, lautet der Wert false. Verlassen Sie sich bei laufenden Vorgängen nicht auf die Existenz des Werts done.

    Fehler bei der Indexerstellung

    Bei der Nutzung von zusammengesetzten Indexen und Einzelfeldindex-Ausnahmen kann es zu Fehlern der Indexerstellung kommen. Ein Indexierungsvorgang kann fehlschlagen, wenn in Firestore ein Problem mit den Daten auftritt, die indexiert werden sollen. In den meisten Fällen bedeutet dies, dass Sie ein Indexlimit erreicht haben. Beispielsweise hat der Vorgang möglicherweise die maximale Anzahl von Indexeinträgen pro Dokument erreicht.

    Wenn die Indexerstellung fehlschlägt, wird die entsprechende Fehlermeldung in der Console angezeigt. Nachdem Sie bestätigt haben, dass Sie keine Indexlimits erreicht haben, führen Sie den Indexierungsvorgang nochmal aus.