Présentation du moteur de données en colonnes AlloyDB Omni

Cette page décrit le moteur de colonnes AlloyDB Omni et fournit des instructions sur l'utilisation du moteur dans les installations de conteneurs et de clusters Kubernetes. Cette page part du principe que vous connaissez PostgreSQL.

Le moteur de données en colonnes AlloyDB Omni accélère le traitement des requêtes SQL pour les analyses, les jointures et les agrégations en fournissant les composants suivants:

  • Un magasin de colonnes contenant des données de table et de vue materialisée pour des colonnes sélectionnées, réorganisées dans un format orienté colonnes.

  • Un planificateur de requêtes et un moteur d'exécution en colonnes qui prennent en charge l'utilisation du magasin de colonnes dans les requêtes.

Vous pouvez utiliser le moteur de colonnes sur l'instance principale, une instance de pool de lecture ou les deux. Vous pouvez également utiliser la colonnarisation automatique pour analyser votre charge de travail et renseigner automatiquement le magasin de colonnes avec les colonnes qui offrent le meilleur gain de performances.

Pour utiliser le moteur de colonnes avec une requête spécifique, toutes les colonnes référencées dans la requête, telles que les jointures et les analyses, doivent se trouver dans le magasin de colonnes.

Par défaut, le moteur de colonnes est configuré pour utiliser 1 Go de la mémoire de votre instance. En fonction de votre charge de travail, de l'utilisation de la mémoire et si vous avez configuré un pool de lecture, vous pouvez choisir de réduire l'allocation de mémoire du moteur de colonnes sur votre instance principale et d'allouer plus de mémoire à l'instance du pool de lecture.

Pour afficher et surveiller l'utilisation de la mémoire par le moteur de colonnes, consultez Afficher l'utilisation de la mémoire du magasin de colonnes. Pour modifier la taille de mémoire utilisée par le magasin de colonnes, consultez la section Configurer la taille du magasin de colonnes. Pour connaître la taille de mémoire recommandée pour votre instance de moteur de données en colonnes, consultez la section Recommander la taille de mémoire du magasin de colonnes.

Types de requêtes qui profitent du moteur de données en colonnes

Certaines requêtes peuvent bénéficier du moteur de données en colonnes. Vous trouverez ci-dessous la liste des opérations et des modèles de requêtes qui profitent le plus du moteur de colonnes:

Opération Modèles de requêtes
Analyse de table Filtres sélectifs, tels que les clauses WHERE.
Un petit nombre de colonnes d'une table ou d'une vue matérialisée plus grande.
Expressions telles que LIKE, SUBSTR ou TRIM.
Fonctions d'agrégation Seules les expressions telles que SUM, MIN, MAX, AVG et COUNT sont autorisées.
Au début de la requête d'une analyse en colonnes.
Dégroupées ou regroupées par colonnes.
ORDER-BY Uniquement si l'opérateur se trouve au début de la requête d'une analyse en colonnes.
SORT Uniquement si l'opérateur se trouve au début de la requête d'une analyse en colonnes et ne trie que sur les colonnes de base de la table ou de la vue matérialisée.
LIMIT Uniquement si l'opérateur se trouve au début de la requête d'une analyse en colonnes et avant tout opérateur SORT ou GROUP BY.
INNER HASH JOIN Uniquement si les clés utilisées sont des colonnes et qu'aucun qualificatif de jointure n'est utilisé.
Jointures sélectives Uniquement si les jointures se trouvent au début de la requête d'une analyse en colonnes.

Pour en savoir plus sur les requêtes qui fonctionnent le mieux avec le moteur en colonnes, savoir si le moteur en colonnes a été utilisé par une requête et comment il a été utilisé, consultez la section Vérifier l'utilisation du moteur en colonnes à l'aide de EXPLAIN.

Utiliser le moteur en colonnes

Pour utiliser le moteur de données en colonnes dans une instance AlloyDB Omni, procédez comme suit:

  1. Activez le moteur sur l'instance.

    L'activation du moteur est une opération ponctuelle qui nécessite de redémarrer la base de données.

  2. Ajoutez des colonnes au magasin de colonnes.

    Pour ajouter des colonnes au magasin de colonnes, utilisez l'une des méthodes suivantes:

  3. Vous pouvez suivre le contenu du magasin de colonnes à l'aide de la vue g_columnar_relations. Une fois les colonnes ajoutées, vous pouvez utiliser l'instruction EXPLAIN pour vérifier l'utilisation du moteur de colonnes dans les requêtes SQL.

Pour obtenir des instructions détaillées sur l'utilisation du moteur en colonnes, consultez la section Configurer le moteur en colonnes.

Données que vous pouvez ajouter au store de colonnes

Les types et sources de données que vous pouvez utiliser lorsque vous ajoutez des colonnes au magasin de colonnes sont limités.

Types de données acceptés

Le moteur de colonnes n'est compatible qu'avec les colonnes comportant les types de données intégrés suivants:

  • array
  • bigint
  • boolean
  • bytea
  • char
  • date
  • decimal
  • double precision
  • enum
  • float4
  • float8
  • integer
  • json
  • jsonb
  • numeric
  • real
  • serial
  • short
  • smallint
  • text
  • timestamp
  • uuid
  • varchar

Le moteur de colonnes ignore toute tentative d'ajout manuel de colonnes contenant des types de données non compatibles au magasin de colonnes.

Sources de données non compatibles

Le moteur de colonnes n'est pas compatible avec les tables ni les vues matérialisées avec les attributs suivants comme sources de données:

  • Tables partitionnées non feuilles

  • Tables étrangères

  • Tables ou vues comportant moins de 5 000 lignes

Limites du moteur de données en colonnes

  • Si vous exécutez une requête analytique sur une colonne comportant un indice, l'optimiseur AlloyDB Omni peut choisir d'utiliser le stockage par ligne.
  • Les colonnes ajoutées manuellement au magasin de colonnes ne sont pas automatiquement supprimées. Pour forcer la suppression des colonnes ajoutées manuellement, utilisez google_columnar_engine_drop sur votre instance.
  • La colonnerisation automatique peut ajouter et supprimer des colonnes de manière dynamique en fonction de l'utilisation des requêtes.
  • Le moteur de colonnes n'est pas compatible avec tous les types de données. Pour connaître les types de données acceptés, consultez la page Types de données acceptés.

  • Les mises à jour fréquentes des lignes invalident les données sous forme de colonnes. Pour valider une table ou une vue matérialisée dans le magasin de données en colonnes, vous pouvez réduire la fréquence de mise à jour ou planifier les actualisations du moteur de données en colonnes plus fréquemment.

    Vous pouvez comparer les colonnes invalid_block_count et total_block_count dans g_columnar_relations pour vérifier si votre tableau ou votre vue est concerné. Si vous modifiez fréquemment votre table ou votre vue, ou si vous le faites en grande quantité, la valeur invalid_block_count sera élevée.

Étape suivante