限制时序模型的预测值

本教程介绍了如何使用限制来缩小时序模型返回的预测结果的范围。在本教程中,您可基于相同的数据创建两个时序模型:一个为使用限制的模型,另一个为不使用限制的模型。这样,您就可以比较这些模型返回的结果,并了解指定限制之间的差异。

在本教程中,您将使用 new_york.citibike_trips 数据训练模型。此数据集包含有关纽约市花旗单车行程的信息。

在遵循本教程之前,您应该熟悉单个时序预测。如需简要了解本主题,请学完根据 Google Analytics(分析)数据进行单个时序预测这一教程。

所需权限

  • 如需创建数据集,您需要拥有 bigquery.datasets.create IAM 权限。
  • 如需创建连接资源,您需要以下权限:

    • bigquery.connections.create
    • bigquery.connections.get
  • 如需创建模型,您需要以下权限:

    • bigquery.jobs.create
    • bigquery.models.create
    • bigquery.models.getData
    • bigquery.models.updateData
    • bigquery.connections.delegate
  • 如需运行推断,您需要以下权限:

    • bigquery.models.getData
    • bigquery.jobs.create

如需详细了解 BigQuery 中的 IAM 角色和权限,请参阅 IAM 简介

目标

在本教程中,您将使用以下内容:

  • CREATE MODEL 语句:用于创建一个时序模型。
  • ML.FORECAST 函数:用于预测每日总访问次数。

费用

本教程使用 Google Cloud 的收费组件,包括以下组件:

  • BigQuery
  • BigQuery ML

如需详细了解 BigQuery 费用,请参阅 BigQuery 价格页面。

如需详细了解 BigQuery ML 费用,请参阅 BigQuery ML 价格

准备工作

  1. 登录您的 Google Cloud 账号。如果您是 Google Cloud 新手,请创建一个账号来评估我们的产品在实际场景中的表现。新客户还可获享 $300 赠金,用于运行、测试和部署工作负载。
  2. 在 Google Cloud Console 中的项目选择器页面上,选择或创建一个 Google Cloud 项目

    转到“项目选择器”

  3. 确保您的 Google Cloud 项目已启用结算功能

  4. 启用 BigQuery API。

    启用 API

  5. 在 Google Cloud Console 中的项目选择器页面上,选择或创建一个 Google Cloud 项目

    转到“项目选择器”

  6. 确保您的 Google Cloud 项目已启用结算功能

  7. 启用 BigQuery API。

    启用 API

创建数据集

创建 BigQuery 数据集以存储您的机器学习模型:

  1. 在 Google Cloud 控制台中,转到 BigQuery 页面。

    转到 BigQuery 页面

  2. 探索器窗格中,点击您的项目名称。

  3. 点击 查看操作 > 创建数据集

    创建数据集。

  4. 创建数据集页面上,执行以下操作:

    • 数据集 ID 部分,输入 bqml_tutorial

    • 位置类型部分,选择多区域,然后选择 US (multiple regions in United States)(美国[美国的多个区域])。

      公共数据集存储在 US 多区域中。为简单起见,请将数据集存储在同一位置。

    • 保持其余默认设置不变,然后点击创建数据集

      创建数据集页面。

直观呈现要预测的时序

在创建模型之前,最好先查看输入时序的情况。

在以下查询中,FROM bigquery-public-data.new_york.citibike_trips 子句指示您正在查询 new_york 数据集中的 citibike_trips 表。

SELECT 语句中,查询会使用 EXTRACT 函数starttime 列中提取日期信息。该查询使用 COUNT(*) 子句获取花旗单车的每日总行程数。

#standardSQL
SELECT
   EXTRACT(DATE from starttime) AS date,
   COUNT(*) AS num_trips
FROM
  `bigquery-public-data`.new_york.citibike_trips
GROUP BY date

如需运行查询,请按以下步骤操作:

  1. 在 Google Cloud 控制台中,点击编写新查询按钮。

  2. 在查询编辑器中输入以下 GoogleSQL 查询。

    #standardSQL
    SELECT
       EXTRACT(DATE from starttime) AS date,
       COUNT(*) AS num_trips
    FROM
      `bigquery-public-data`.new_york.citibike_trips
    GROUP BY date
    
  3. 点击运行。查询类似于以下内容。

    查询输出。

  4. 使用 Google Cloud 控制台为时序数据绘制图表。在查询结果窗格中,点击图表标签页。在图表配置窗格中,为图表类型选择条形图

    Result_visualization。

创建时序模型

使用纽约市花旗单车行程数据创建一个时序模型。

以下 GoogleSQL 查询会创建一个用于预测单车每日总行程数的模型。CREATE MODEL 语句将创建并训练一个名为 bqml_tutorial.nyc_citibike_arima_model 的模型。

#standardSQL
CREATE OR REPLACE MODEL bqml_tutorial.nyc_citibike_arima_model
OPTIONS
  (model_type = 'ARIMA_PLUS',
   time_series_timestamp_col = 'date',
   time_series_data_col = 'num_trips'
  ) AS
SELECT
   EXTRACT(DATE from starttime) AS date,
   COUNT(*) AS num_trips
FROM
  `bigquery-public-data`.new_york.citibike_trips
WHERE starttime > '2014-07-11' AND starttime < '2015-02-11'
GROUP BY date

OPTIONS(model_type='ARIMA_PLUS', time_series_timestamp_col='date', ...) 子句指示您正在创建一个基于 ARIMA 的时序模型。默认情况下,auto_arima=TRUE,因此 auto.ARIMA 算法会自动调整 ARIMA_PLUS 模型中的超参数。该算法适合数十个候选模型,选择具有最低 Akaike 信息标准 (AIC) 的模型。此外,由于默认设置为 data_frequency='AUTO_FREQUENCY',因此训练过程会自动推断输入时序的数据频率。最后,默认情况下,CREATE MODEL 语句使用 decompose_time_series=TRUE,因此时序的历史记录和预测部分都保存在模型中。您可以使用此信息通过提取单独的时序组件(例如季节性周期)来进一步了解如何预测时序。

运行 CREATE MODEL 查询以创建并训练模型:

  1. 在 Google Cloud 控制台中,点击编写新查询按钮。

  2. 在查询编辑器中输入以下 GoogleSQL 查询。

    #standardSQL
    CREATE OR REPLACE MODEL `bqml_tutorial.nyc_citibike_arima_model`
    OPTIONS
      (model_type = 'ARIMA_PLUS',
       time_series_timestamp_col = 'date',
       time_series_data_col = 'num_trips'
      ) AS
    SELECT
       EXTRACT(DATE from starttime) AS date,
       COUNT(*) AS num_trips
    FROM
      `bigquery-public-data`.new_york.citibike_trips
    WHERE starttime > '2014-07-11' AND starttime < '2015-02-11'
    GROUP BY date
    
  3. 点击运行

    查询大约需要 17 秒才能完成,之后您的模型 (nyc_citibike_arima_model) 将显示在浏览器窗格中。由于查询使用 CREATE MODEL 语句来创建模型,因此没有查询结果。

预测时序并直观呈现结果

为了说明时序的预测方式,请使用 ML.FORECAST 函数直观呈现所有子时序组件,例如季节性和趋势。

请按以下步骤进行此操作:

  1. 在 Google Cloud 控制台中,点击编写新查询按钮。

  2. 在查询编辑器中输入以下 GoogleSQL 查询。

    #standardSQL
      SELECT
      forecast_timestamp AS forecast_timestamp,
      history_value AS history_value,
      forecast_value AS forecast_value
      FROM ( (
         SELECT
            DATE(forecast_timestamp) AS forecast_timestamp,
            NULL AS history_value,
            forecast_value AS forecast_value
         FROM
            ML.FORECAST(MODEL bqml_tutorial.`nyc_citibike_arima_model`,
            STRUCT(365 AS horizon,
               0.9 AS confidence_level)) )
      UNION ALL (
         SELECT
            DATE(date_name) AS forecast_timestamp,
            num_trips AS history_value,
            NULL AS forecast_value
         FROM (
            SELECT
            EXTRACT(DATE
            FROM
               starttime) AS date_name,
            COUNT(*) AS num_trips
            FROM
            `bigquery-public-data`.new_york.citibike_trips
            WHERE
            starttime > '2014-07-11'
            AND starttime < '2015-02-11'
            GROUP BY
            date_name ) ))
      ORDER BY
      forecast_timestamp
    
  3. 点击运行。查询结果类似于以下内容:

    BQUI_chart。

  4. 使用 Google Cloud 控制台为时序数据绘制图表。在查询结果窗格中,点击图表标签页:

    Result_visualization。

该图表显示了花旗单车每日总行程数的预测值是负数,这没什么用。相反,使用具有限制的模型可以改进预测数据。

创建具有限制的时序模型

使用纽约市花旗单车行程数据创建一个具有限制的时序模型。

以下 GoogleSQL 查询会创建一个用于预测单车每日总行程数的模型。CREATE MODEL 语句将创建并训练一个名为 bqml_tutorial.nyc_citibike_arima_model_with_limits 的模型。 此模型与您之前创建的模型之间的唯一区别是添加了 forecast_limit_lower_bound=0 选项。此选项会使模型仅预测大于 0 的值。

#standardSQL
CREATE OR REPLACE MODEL `bqml_tutorial.nyc_citibike_arima_model_with_limits`
OPTIONS
  (model_type = 'ARIMA_PLUS',
   time_series_timestamp_col = 'date',
   time_series_data_col = 'num_trips',
   forecast_limit_lower_bound = 0
  ) AS
SELECT
   EXTRACT(DATE from starttime) AS date,
   COUNT(*) AS num_trips
FROM
  `bigquery-public-data`.new_york.citibike_trips
WHERE starttime > '2014-07-11' AND starttime < '2015-02-11'
GROUP BY date

运行 CREATE MODEL 查询以创建并训练模型:

  1. 在 Google Cloud 控制台中,点击编写新查询按钮。

  2. 在查询编辑器中输入以下 GoogleSQL 查询。

    #standardSQL
    CREATE OR REPLACE MODEL `bqml_tutorial.nyc_citibike_arima_model_with_limits`
    OPTIONS
      (model_type = 'ARIMA_PLUS',
       time_series_timestamp_col = 'date',
       time_series_data_col = 'num_trips',
       forecast_limit_lower_bound = 0
      ) AS
    SELECT
       EXTRACT(DATE from starttime) AS date,
       COUNT(*) AS num_trips
    FROM
      `bigquery-public-data`.new_york.citibike_trips
     WHERE starttime > '2014-07-11' AND starttime < '2015-02-11'
    GROUP BY date
    
  3. 点击运行

    查询大约需要 17 秒才能完成,之后您的模型 (nyc_citibike_arima_model_with_limits) 将显示在浏览器窗格中。由于查询使用 CREATE MODEL 语句来创建模型,因此没有查询结果。

使用具有限制的模型预测时序

  1. 在 Google Cloud 控制台中,点击编写新查询按钮。

  2. 在查询编辑器中输入以下 GoogleSQL 查询。

    #standardSQL
      SELECT
      forecast_timestamp AS forecast_timestamp,
      history_value AS history_value,
      forecast_value AS forecast_value
      FROM ( (
         SELECT
            DATE(forecast_timestamp) AS forecast_timestamp,
            NULL AS history_value,
            forecast_value AS forecast_value
         FROM
            ML.FORECAST(MODEL `bqml_tutorial.nyc_citibike_arima_model_with_limits`,
            STRUCT(365 AS horizon,
               0.9 AS confidence_level)) )
      UNION ALL (
         SELECT
            DATE(date_name) AS forecast_timestamp,
            num_trips AS history_value,
            NULL AS forecast_value
         FROM (
            SELECT
            EXTRACT(DATE
            FROM
               starttime) AS date_name,
            COUNT(*) AS num_trips
            FROM
            `bigquery-public-data`.new_york.citibike_trips
            WHERE
            starttime > '2014-07-11'
            AND starttime < '2015-02-11'
            GROUP BY
            date_name ) ))
      ORDER BY
      forecast_timestamp
    
  3. 点击运行

    BQUI_chart。

  4. 使用 Google Cloud 控制台为时序数据绘制图表。在查询结果窗格中,点击图表标签页:

    Result_visualization。

ARIMA PLUS 模型检测到花旗单车行程的每日总数正在减少。未来预测值将遵循此趋势,并从中确定未来时间的预测值。该图表显示了花旗单车每日总行程数的预测值是正数,这更有用。该具有限制的模型检测到花旗单车行程的每日总数正在减少,但这仍提供了有意义的预测值。

如本教程所示,forecast_limit_lower_boundforecast_limit_upper_bound 选项可帮助您在与此处所示场景类似的场景中获得更有意义的预测值,例如在预测股票价格或未来销量时。

删除数据集

删除项目也将删除项目中的所有数据集和所有表。如果您希望重复使用该项目,则可以删除在本教程中创建的数据集:

  1. 如有必要,请在 Google Cloud 控制台中打开 BigQuery 页面。

    前往 BigQuery 页面

  2. 在导航窗格中,点击您创建的 bqml_tutorial 数据集。

  3. 点击窗口右侧的删除数据集。此操作会删除相关数据集、表和所有数据。

  4. 删除数据集对话框中,通过输入数据集的名称 (bqml_tutorial) 来确认该删除命令,然后点击删除

删除项目

如需删除项目,请执行以下操作:

  1. 在 Google Cloud 控制台中,进入管理资源页面。

    转到“管理资源”

  2. 在项目列表中,选择要删除的项目,然后点击删除
  3. 在对话框中输入项目 ID,然后点击关闭以删除项目。

后续步骤