Testen Sie Gemini 1.5-Modelle, unsere neuesten multimodalen Modelle in Vertex AI, und erfahren Sie, was Sie mit einem 1 Mio. Tokenkontextfenster erstellen können. Tesen Sie Gemini 1.5-Modelle, unsere neuesten multimodalen Modelle in Vertex AI, und erfahren Sie, was Sie mit einem 1 Mio. Tokenkontextfenster erstellen können.

Nach Vektorübereinstimmungen filtern

In der Vektorsuche können Sie mithilfe von booleschen Regeln die Suche nach Vektorähnlichkeiten auf eine Teilmenge des Index beschränken. Boolesche Prädikate teilen der Vektorsuche mit, welche Vektoren im Index ignoriert werden sollen. Auf dieser Seite erfahren Sie mehr über die Funktionsweise des Filterns und können sich Beispiele und Möglichkeiten zur effizienten Abfrage von Daten basierend auf Vektorähnlichkeiten ansehen.

Mit der Vektorsuche können Sie Ergebnisse nach kategorialen und numerischen Einschränkungen einschränken. Das Hinzufügen von Einschränkungen oder das „Filtern“ Ihrer Indexergebnisse ist aus verschiedenen Gründen hilfreich, wie in den folgenden Beispielen:

Verbesserte Ergebnisrelevanz: Die Vektorsuche ist ein leistungsstarkes Tool zum Auffinden semantisch ähnlicher Elemente. Mithilfe von Filtern können irrelevante Ergebnisse aus den Suchergebnissen entfernt werden, z. B. Elemente, die nicht in der richtigen Sprache, Kategorie, Preis oder demselben Zeitraum liegen.
Geringere Anzahl an Ergebnissen: Die Vektorsuche kann eine große Anzahl von Ergebnissen zurückgeben, insbesondere bei großen Datasets. Mit Filtern können Sie die Anzahl der Ergebnisse auf eine überschaubare Zahl reduzieren, während Sie weiterhin die relevantesten Ergebnisse zurückgeben.
Segmentierte Ergebnisse: Mithilfe von Filtern können die Suchergebnisse an die individuellen Anforderungen und Einstellungen des Nutzers angepasst werden. Beispielsweise kann ein Nutzer die Ergebnisse so filtern, dass nur Elemente angezeigt werden, die in der Vergangenheit hoch bewertet wurden oder in eine bestimmte Preisspanne fallen.

Vektorattribute

In einer Vektorähnlichkeitssuche über eine Datenbank von Vektoren wird jeder Vektor durch null oder mehr Attribute beschrieben. Diese Attribute werden als Tokens für Tokeneinschränkungen und Werte für numerische Einschränkungen bezeichnet. Diese Einschränkungen können für jede der mehreren Attributkategorien gelten, auch als Namespaces bezeichnet.

In der folgenden Beispielanwendung sind Vektoren mit color, price und shape getaggt:

color, price, und shape sind Namespaces.
red und blue sind Tokens aus dem color-Namespace.
square und circle sind Tokens aus dem shape-Namespace.
100 und 50 sind Werte aus dem Namespace price.

Vektorattribute angeben

So geben Sie einen „roten Kreis “ an: {color: red}, {shape: circle}.
So geben Sie ein „ rotes und blaues Quadrat“ an: {color: red, blue}, {shape: square}.
Wenn Sie ein Objekt ohne Farbe angeben möchten, lassen Sie den Namespace „Farbe“ im Feld restricts weg.
Notieren Sie sich den Namespace und den Wert im entsprechenden Feld für den Typ, um numerische Einschränkungen für ein Objekt anzugeben. Der Ganzzahlwert muss in value_int, der Gleitkommawert in value_float und der doppelte Wert in value_double angegeben werden. Für einen bestimmten Namespace sollte nur ein Zahlentyp verwendet werden.

Informationen zu dem Schema, das zum Angeben dieser Daten verwendet wird, finden Sie unter Namespaces und Tokens in den Eingabedaten angeben.

Abfragen

Abfragen drücken einen logischen UND-Operator über Namespaces hinweg und einen logischen OR-Operator innerhalb jedes Namespace aus. Eine Abfrage, die {color: red, blue}, {shape: square, circle} angibt, stimmt mit allen Datenbankpunkten überein, die (red || blue) && (square || circle) erfüllen.
Eine Abfrage, die {color: red} angibt, Übereinstimmungen werden mit allen red-Objekten ohne Einschränkung bei shape abgeglichen.
Numerische Einschränkungen in Abfragen erfordern namespace, einen der Zahlenwerte aus value_int, value_float und value_double sowie den Operator op.
Operator op ist einer der folgenden Werte: LESS, LESS_EQUAL, EQUAL, GREATER_EQUAL und GREATER. Wenn beispielsweise der Operator LESS_EQUAL verwendet wird, sind Datenpunkte zulässig, wenn ihr Wert kleiner oder gleich dem in der Abfrage verwendeten Wert ist.

Die folgenden Codebeispiele identifizieren Vektorattribute in der Beispielanwendung:

{
  namespace: "price"
  value_int: 20
  op: LESS
}

{
  namespace: "length"
  value_float: 0.3
  op: GREATER_EQUAL
}

{
  namespace: "width"
  value_double: 0.5
  op: EQUAL
}

Sperrliste

Für komplexere Szenarien unterstützt Google eine Form der Negation, die als Sperrlisten-Tokens bezeichnet wird. Wenn eine Abfrage ein Token in die Sperrliste aufnimmt, werden Übereinstimmungen für jeden Datenpunkt ausgeschlossen, der das Sperrlisten-Token enthält. Wenn ein Abfrage-Namespace nur Sperrlisten-Tokens enthält, stimmen alle Punkte, die nicht explizit auf die Sperrliste gesetzt wurden, genau auf dieselbe Weise überein wie ein leerer Namespace mit allen Punkten übereinstimmt.

Datenpunkte können auch ein Token auf die Sperrliste setzen und Übereinstimmungen mit jeder Abfrage, die dieses Token enthält, ausschließen.

Definieren Sie beispielsweise die folgenden Datenpunkte mit den angegebenen Tokens:

A: {}                  // empty set matches everything
B: {red}               // only a 'red' token
C: {blue}              // only a 'blue' token
D: {orange}            // only an 'orange' token
E: {red, blue}         // multiple tokens
F: {red, !blue}        // deny the 'blue' token
G: {red, blue, !blue}  // An unlikely edge-case
H: {!blue}             // deny-only (similar to empty-set)

Das System verhält sich so:

Leere Abfrage-Namespaces sind universell übereinstimmende Platzhalter. Beispielsweise stimmt Q:{} mit DB:{color:red} überein.
Leere Datenpunkt-Namespaces sind keine universell übereinstimmende Platzhalter. Q:{color:red} stimmt beispielsweise nicht mit DB:{} überein.

Namespaces und Tokens oder Werte in den Eingabedaten angeben

Informationen zur Strukturierung Ihrer Eingabedaten finden Sie unter Format und Struktur der Eingabedaten.

Auf den folgenden Tabs wird gezeigt, wie Sie die Namespaces und Tokens angeben, die mit jedem Eingabevektor verknüpft sind.

JSON

Fügen Sie für den Datensatz jedes Vektors ein Feld namens restricts hinzu, das ein Array von Objekten enthält, die jeweils ein Namespace sind.
- Jedes Objekt muss ein Feld mit dem Namen namespace haben. Dieses Feld ist der Namespace TokenNamespace.namespace.
- Der Wert des Felds allow, falls vorhanden, ist ein Array von Strings. Dieses Array von Strings ist die TokenNamespace.string_tokens-Liste.
- Der Wert des Felds deny, falls vorhanden, ist ein Array von Strings. Dieses Array von Strings ist die TokenNamespace.string_denylist_tokens-Liste.

Im Folgenden finden Sie zwei Beispieleinträge im JSON-Format:

{"id": "42", "embedding": [0.5, 1.0], "restricts": [{"namespace": "class",
"allow": ["cat", "pet"]},{"namespace": "category", "allow": ["feline"]}]}
{"id": "43", "embedding": [0.6, 1.0], "restricts": [{"namespace":
"class", "allow": ["dog", "pet"]},{"namespace": "category", "allow":
["canine"]}]}

Fügen Sie für den Datensatz jedes Vektors ein Feld namens numeric_restricts hinzu, das ein Array von Objekten enthält, die jeweils eine numerische Beschränkung sind.
- Jedes Objekt muss ein Feld mit dem Namen namespace haben. Dieses Feld ist der Namespace NumericRestrictNamespace.namespace.
- Jedes Objekt muss einen der folgenden Werte haben: value_int, value_float oder value_double.
- Jedes Objekt darf kein Feld mit dem Namen op haben. Dieses Feld dient nur der Abfrage.