使用 Google Cloud 控制台为视频加标签

在本快速入门中,您将完成使用 AutoML 模型为视频添加注释的过程。

启用 API

访问 AutoML Video 界面,然后点击启用 API

创建数据集

  1. 启用该 API 后,转到 AutoML Video 界面,然后点击开始使用
    (点击开始使用
    系统会显示以下屏幕:
    (为数据集指定名称
    (1) 指定此数据集的名称
    (2) 选择Video 分类
    (3) 点击创建数据集

  2. 系统将显示以下屏幕:
    提供 Cloud Storage URI
    (1)提供包含训练数据 URI 的 CSV 文件的 Cloud Storage URI(请参阅在本快速入门中的准备数据
    ,请使用:

    automl-video-demo-data/hmdb_split1.csv

    (2)点击继续开始导入您的数据。
    系统将显示以下屏幕:
    导入数据

导入过程完成后,您将收到一封电子邮件,其中包含视频标签中数据集的链接。
导入数据

要查看导入过程中出现的任何错误,请切换到导入标签页,并检查错误消息。

训练模型

  1. 创建并处理数据集后,转到训练标签页,然后点击开始训练
    开始训练
    系统会显示训练新模型屏幕:
    开始训练视图
  2. 点击开始训练
    您的模型现在启动训练。对于此特定数据集,服务将通过电子邮件提供该结果的相关连接。
    已部署
    该服务会自动部署您的模型。
  3. 点击评估标签可获取有关 F1、精确率和召回率分数等的更多信息。
    系统将显示评估视图:评估视图

对视频进行分类

要使用您的模型(即对视频进行分类)进行预测,请选择该模型的测试和使用标签。

测试模型

  1. 输入 CSV字段中,添加:
    gs://automl-video-demo-data/hmdb_split1_test_gs_predict.csv(请参阅准备数据
  2. 结果存储桶下,点击浏览以选择 Cloud Storage 存储桶,或在 Cloud Storage 存储桶中创建一个用于存储注解结果的目录。创建存储桶时,请确保将位置指定为 US-CENTral1。
    存储分区
    例如:
    存储分区示例
    您可能希望在 Cloud Storage 存储桶中创建特定的“结果”文件夹以保存注解结果。这样,您可以通过加载结果目录中包含的 video_classification.csv 文件,更轻松地访问较早的预测结果。
  3. 点击获取预测
    您将收到一封电子邮件,其中包含指向数据集的链接。
    配置 AutoML Video Intelligence 的预测

获取预测的过程可能需要一些时间,具体取决于要添加注释的视频数量。

该过程完成后,结果将显示在该模型页面中最近的预测下方。要查看结果,请执行以下操作:

  1. 预测列的最近的预测下,点击要查看的预测结果所对应的查看
  2. 视频下,选择要查看其结果的视频的名称。
    AutoML Video Intelligence 预测的结果

查看结果

在视频注解结果中,AutoML Video 提供三种类型的信息:

  • 视频的标签。您可以在结果页面中视频下方的片段标签下找到该信息。
  • 视频中镜头的标签。您可以在结果页面中视频下方的镜头标签下找到该信息。
  • 视频中每 1 秒间隔的标签。您可以在结果页面中视频下方的 1 秒间隔标签下找到该信息。

如果要查看更多标签,您可以在请求预测时更改阈值分数。AutoML Video 仅显示超出指定阈值的标签。

如果预测失败,则列表中的结果将在最近的预测列表中显示红色图标。

如果尝试执行的预测操作中只有一个视频失败,则在最近的预测列表中,预测显示绿色。在该预测的结果页面,您可以查看 AutoML Video 已添加注释的视频的结果。