Interpretar resultados de previsão de modelos de reconhecimento de ações em vídeo

Depois de solicitar uma previsão, a Vertex AI retorna resultados com base no objetivo do modelo. As previsões de um modelo de reconhecimento de ações retornam momentos de ações, de acordo com rótulos que você define. O modelo atribui uma pontuação de confiança a cada previsão, que comunica o nível de confiança e precisão com que seu modelo identificou uma ação. Quanto mais alto for o número, maior será a confiança do modelo na precisão da previsão.

Exemplo de saída de previsão em lote

A amostra a seguir é o resultado previsto de um modelo que identifica as ações de "balanço" e "pulo" em um vídeo. Cada resultado inclui um rótulo ("balanço" ou "pulo") para a ação identificada, um segmento de tempo com o mesmo horário de início e término que especifica o momento da ação e uma pontuação de confiança.

Observação: o exemplo a seguir de JSON Lines inclui quebras de linha para facilitar a leitura. Nos arquivos JSON Lines, as quebras de linha são incluídas somente após cada objeto JSON.

{
  "instance": {
   "content": "gs://bucket/video.mp4",
    "mimeType": "video/mp4",
    "timeSegmentStart": "1s",
    "timeSegmentEnd": "5s"
  }
  "prediction": [{
    "id": "1",
    "displayName": "swing",
    "timeSegmentStart": "1.2s",
    "timeSegmentEnd": "1.2s",
    "confidence": 0.7
  }, {
    "id": "2",
    "displayName": "jump",
    "timeSegmentStart": "3.4s",
    "timeSegmentEnd": "3.4s",
    "confidence": 0.5
  }]
}