Spanner 查询优化器会确定执行 SQL 查询的最有效方式。不过,由优化器确定的查询计划 查询优化器本身的演变,或数据库的 统计信息已更新。尽可能降低性能下降的可能性 查询优化器或统计信息发生变化时,Spanner 会提供 以下查询选项。
optimizer_version:捆绑了对查询优化器的更改, 发布为优化器版本。Spanner 开始使用最新版本 优化工具的默认版本。 您可以使用查询优化器版本选项针对旧版优化器运行查询。
optimizer_statistics_package:Spanner 会定期更新优化器统计信息。新统计信息以文件包的形式提供。 此查询选项用于指定一个统计信息软件包,供查询优化器在编译 SQL 查询时使用。指定的软件包必须进行垃圾回收 已停用:
GoogleSQL
ALTER STATISTICS <package_name> SET OPTIONS (allow_gc=false)
PostgreSQL
ALTER STATISTICS spanner."" SET OPTIONS (allow_gc = true)
本指南介绍了如何在 Spanner 的不同范围内设置这些单独的选项。
列出查询优化器选项
Spanner 会存储您可以选择的可用优化器版本和统计信息软件包的相关信息。
优化器版本
查询优化器版本是一个整数值,每次更新时递增 1。查询优化器的最新版本为 7。
执行以下 SQL 语句以返回所有受支持的优化器版本的列表及其相应的发布日期,以及该版本是否为默认版本。返回的最大版本号是支持的优化器最新版本。
SELECT * FROM SPANNER_SYS.SUPPORTED_OPTIMIZER_VERSIONS;
默认版本
默认情况下,Spanner 会在最新版本的 Google Cloud 优化工具发布后至少 30 天开始使用该版本。从新版本到默认版本为期 30 天的宽限期内,建议您根据新版本测试查询,以检测是否有任何回归问题。
如需查找默认版本,请执行以下 SQL 语句:
SELECT * FROM SPANNER_SYS.SUPPORTED_OPTIMIZER_VERSIONS;
查询将返回所有受支持的优化器版本的列表。IS_DEFAULT
列指定的是当前默认版本。
如需详细了解每个版本,请参阅查询优化器版本版本记录。
优化器统计信息包
Spanner 创建的每个新的优化器统计信息包都是 分配了一个包名称,该名称保证在给定 数据库。
软件包名称的格式为 auto_{PACKAGE_TIMESTAMP}UTC
。
在 GoogleSQL 中,ANALYZE
语句触发统计信息软件包名称的创建。在 PostgreSQL 中,ANALYZE
语句会执行此任务。统计信息软件包名称的格式为
analyze_{PACKAGE_TIMESTAMP}UTC
,其中
{PACKAGE_TIMESTAMP}
是 UTC 时区中
统计信息构建流程开始。执行以下 SQL 语句以返回所有可用优化器统计信息包的列表。
SELECT * FROM INFORMATION_SCHEMA.SPANNER_STATISTICS;
默认情况下,除非数据库或查询使用本页面上所述的某个方法固定到旧版软件包,否则 Spanner 默认使用最新的优化器统计信息软件包。
选项替换优先级
如果您使用的是 GoogleSQL 方言数据库,Spanner 提供了多种更改优化器选项的方法。例如,您可以为特定查询设置选项,或在客户端库的进程级层或查询级层配置选项。如果以多种方式设置选项,则遵循以下优先顺序。(选择链接以转到本文档中的相应部分)。
Spanner 默认 ← 数据库选项 ← 客户端应用 ← 环境变量 ← 客户端查询 ← 语句提示
例如,下面展示了如何在设置 查询优化器版本:
创建数据库时,数据库将使用 Spanner 默认优化器版本。使用上面列出的方法之一设置优化器版本 且优先级高于其左侧任何内容。例如,使用环境变量为应用设置优化器的优先级高于您使用数据库选项为数据库设置的任何值。对于一个给定的查询,通过语句提示设置优化器版本的优先级最高,优先于使用任何其他方法设置的值。
现在,让我们来更详细地了解每种方法。
在数据库级设置优化器选项
您可以使用以下 ALTER DATABASE
DDL 命令在数据库上设置默认优化器版本。
GoogleSQL
ALTER DATABASE MyDatabase
SET OPTIONS (optimizer_version = 7);
PostgreSQL
ALTER DATABASE MyDatabase SET spanner.optimizer_version = 5;
您可以以类似方式设置统计信息软件包,如以下示例所示。
GoogleSQL
ALTER DATABASE MyDatabase
SET OPTIONS (optimizer_statistics_package = "auto_20191128_14_47_22UTC");
PostgreSQL
ALTER DATABASE MyDatabase
SET spanner.optimizer_statistics_package = "auto_20191128_14_47_22UTC";
您还可以同时设置多个选项,如 运行 DDL 命令
GoogleSQL
ALTER DATABASE MyDatabase
SET OPTIONS (optimizer_version = 7,
optimizer_statistics_package = "auto_20191128_14_47_22UTC");
您可以使用 gcloud CLI databases ddl update
命令在 gcloud CLI 中运行 ALTER DATABASE
,如下所示。
GoogleSQL
gcloud spanner databases ddl update MyDatabase --instance=test-instance \
--ddl='ALTER DATABASE MyDatabase SET OPTIONS ( optimizer_version = 7 )'
PostgreSQL
gcloud spanner databases ddl update MyDatabase --instance=test-instance \
--ddl='ALTER DATABASE MyDatabase SET spanner.optimizer_version = 7'
将数据库选项设置为 NULL
(在 GoogleSQL 中)或 DEFAULT
(在
PostgreSQL)会清除该行,以便使用默认值。
要查看数据库中这些选项的当前值,请查询
INFORMATION_SCHEMA.DATABASE_OPTIONS
视图(对于 GoogleSQL),或
information_schema database_options
表(对于 PostgreSQL),如下所示。
GoogleSQL
SELECT
s.OPTION_NAME,
s.OPTION_VALUE
FROM
INFORMATION_SCHEMA.DATABASE_OPTIONS s
WHERE
s.SCHEMA_NAME=""
AND s.OPTION_NAME IN ('optimizer_version', 'optimizer_statistics_package')
PostgreSQL
SELECT
s.option_name,
s.option_value
FROM
information_schema.database_options s
WHERE
s.schema_name='public'
AND s.option_name IN ('optimizer_version',
'optimizer_statistics_package')
使用客户端库设置优化器选项
通过客户端以编程方式与 Spanner 交互时 库中提供的查询,您可以通过多种方法 客户端应用
您必须使用最新版本的客户端库才能设置优化器选项。
为数据库客户端设置优化器选项
应用可以通过以下方法在客户端库上全局设置优化器选项: 配置查询选项属性,如以下代码段所示。 优化器设置存储在客户端实例中,并应用于在客户端生命周期内运行的所有查询。尽管这些选项在后端适用于数据库级别, 这些选项在客户端级别设置,它们适用于连接到 该客户端。
C++
C#
Go
Java
Node.js
PHP
Python
Ruby
使用环境变量设置优化器选项
如需更轻松地尝试不同的优化器设置,而无需重新编译应用,您可以设置 SPANNER_OPTIMIZER_VERSION
和 SPANNER_OPTIMIZER_STATISTICS_PACKAGE
环境变量并运行应用,如以下代码段所示。
Linux/macOS
export SPANNER_OPTIMIZER_VERSION="7"
export SPANNER_OPTIMIZER_STATISTICS_PACKAGE="auto_20191128_14_47_22UTC"
Windows
set SPANNER_OPTIMIZER_VERSION="7"
set SPANNER_OPTIMIZER_STATISTICS_PACKAGE="auto_20191128_14_47_22UTC"
指定的查询优化器选项值被读取并存储在客户端中 实例,并且会应用于运行的所有查询 在客户端的整个生命周期内
为客户端查询设置优化器选项
通过在构建查询时指定查询选项属性,您可以在客户端应用的查询级层为优化器版本或统计信息软件包版本指定值。
C++
C#
Go
Java
Node.js
PHP
Python
Ruby
使用语句提示为查询设置优化器选项
语句提示是对查询语句的提示,会更改查询执行的默认行为。在语句上设置 OPTIMIZER_VERSION
提示会强制使用指定的查询优化器版本运行该查询。
OPTIMIZER_VERSION
提示具有最高的优化器版本优先级。如果指定了语句提示,则将使用该提示,而不考虑其他所有优化器版本设置。
GoogleSQL
@{OPTIMIZER_VERSION=7} SELECT * FROM MyTable;
PostgreSQL
/*@OPTIMIZER_VERSION=7*/ SELECT * FROM MyTable;
您还可以使用 latest_version 字面量将查询的优化器版本设置为最新版本,如此处所示。
GoogleSQL
@{OPTIMIZER_VERSION=latest_version} SELECT * FROM MyTable;
PostgreSQL
/*@OPTIMIZER_VERSION=latest_version*/ SELECT * FROM MyTable;
将 OPTIMIZER_STATISTICS_PACKAGE
提示设置为开启
语句强制使用指定的查询优化器运行该查询
统计信息软件包版本。指定的软件包必须停用垃圾回收:
GoogleSQL
ALTER STATISTICS <package_name> SET OPTIONS (allow_gc=false)
PostgreSQL
ALTER STATISTICS spanner."package_name" SET OPTIONS (allow_gc=false)
OPTIMIZER_STATISTICS_PACKAGE
提示包含最高优化器软件包
设置优先级。如果指定了语句提示,系统将使用该提示
无论所有其他优化程序软件包版本设置如何。
@{OPTIMIZER_STATISTICS_PACKAGE=auto_20191128_14_47_22UTC} SELECT * FROM MyTable;
您还可以通过 latest 字面量来使用最新的统计信息软件包。
@{OPTIMIZER_STATISTICS_PACKAGE=latest} SELECT * FROM MyTable;
这两个提示都可以在单个语句中设置,如以下示例所示。
default_version 字面量会将查询的优化器版本设置为默认版本,此版本可能与最新版本不同。如需了解详情,请参阅默认版本。
GoogleSQL
@{OPTIMIZER_VERSION=default_version, OPTIMIZER_STATISTICS_PACKAGE=auto_20191128_14_47_22UTC} SELECT * FROM MyTable;
PostgreSQL
/*@OPTIMIZER_VERSION=default_version, OPTIMIZER_STATISTICS_PACKAGE=auto_20191128_14_47_22UTC*/ SELECT * FROM KeyValue;
使用 Spanner JDBC 驱动程序时设置优化器选项
如以下示例所示,您可以通过在 JDBC 连接字符串中指定选项来替换优化器版本和统计信息软件包的默认值。
只有最新版本的 Spanner JDBC 驱动程序支持这些选项。
您还可以使用 SET OPTIMIZER_VERSION
语句设置查询优化器版本,如以下示例所示。
如需详细了解如何使用开源驱动程序,请参阅使用开源 JDBC 驱动程序。
无效优化器版本的处理方式
Spanner 支持一系列范围的优化器版本。当查询优化器更新时,此范围会随之发生变化。如果您指定的版本超出范围,则查询会失败。例如,如果您尝试
包含语句提示的查询
@{OPTIMIZER_VERSION=8}
,
但最新的优化器版本号只是
7
,Spanner 会做出以下响应:
此错误消息:
Query optimizer version: 8 is not
supported
处理无效的优化工具统计信息包设置
您可以将数据库或查询固定到 可用的统计信息软件包 使用本页前面介绍的方法之一。如果提供的统计信息软件包名称无效,则查询会失败。A 统计信息 软件包必须为:
确定用于运行查询的查询优化器版本
您可以通过 Google Cloud 控制台查看用于查询的优化器版本 以及在 Google Cloud CLI 中执行此操作。
Google Cloud 控制台
如需查看用于查询的优化器版本,请在 Google Cloud 控制台中的 Spanner Studio 页面中运行查询,然后选择说明标签页。您应该会看到如下所示的消息:
查询优化器版本:7
gcloud CLI
如需查看在 gcloud CLI 中运行查询时使用的版本,请将
将 --query-mode
标志设置为 PROFILE
,如以下代码段所示。
gcloud spanner databases execute-sql MyDatabase --instance=test-instance \
--query-mode=PROFILE --sql='SELECT * FROM MyTable'
在 Metrics Explorer 中直观呈现查询优化器版本
Cloud Monitoring 会收计量结果,以帮助您了解应用和系统服务的性能。收集的指标之一 查询计数,用于衡量 实例中查询的百分比,随时间的抽样。此指标可帮助我们查看按错误代码分组的查询,此外,我们还可以使用它来查看运行每个查询的优化器版本。
您可以使用 Google Cloud 控制台中的 Metrics Explorer 来直观呈现数据库实例的查询计数。图 1 显示了三个数据库的查询计数。您可以查看每个数据库中使用的优化器版本。
此图中图表下方的表格显示 my-db-1
尝试使用无效的优化器版本运行查询,返回 Bad usage 状态,并导致查询计数为 0。其他数据库分别使用优化器版本 1 和版本 2 运行查询。
图 1:Metrics Explorer 中显示的按优化器版本分组的查询的查询计数。
要为您的实例设置类似的图表,请执行以下操作:
- 在 Google Cloud 控制台中,前往 Metrics Explorer。
- 在资源类型字段中,选择
Cloud Spanner Instance
。 - 在指标字段中,选择
Count of queries
。 - 在分组依据字段中,选择
database
、optimizer_version
和status
。
本示例中未显示同一数据库的不同查询使用不同优化器版本的情况。在这种情况下,图表会针对数据库和优化器的每个组合显示条形图。
了解如何使用 Cloud Monitoring 来监控 Spanner 实例,请参阅使用 Cloud Monitoring 进行监控