Interpretar resultados de previsão de modelos de rastreamento de objetos em vídeo

Depois de solicitar uma previsão, a Vertex AI retorna resultados com base no objetivo do modelo. As previsões de um modelo de rastreamento de objetos retornam o horário e os locais dos objetos a serem rastreados, de acordo com rótulos que você define. O modelo atribui uma pontuação de confiança a cada previsão. Isso informa o nível de confiança e precisão com que seu modelo identificou e rastreou um objeto. Quanto maior o número, maior a confiança do modelo na exatidão da previsão.

Exemplo de saída de previsão em lote

A amostra a seguir é o resultado previsto de um modelo que rastreia gatos e cachorros em um vídeo. Cada resultado inclui um rótulo (cat ou dog) para o objeto que está sendo monitorado, um segmento de tempo que especifica quando e por quanto tempo ele está sendo rastreado e uma caixa delimitadora que descreve a localização do objeto.

{
  "instance": {
   "content": "gs://bucket/video.mp4",
    "mimeType": "video/mp4",
    "timeSegmentStart": "1s",
    "timeSegmentEnd": "5s"
  }
  "prediction": [{
    "id": "1",
    "displayName": "cat",
    "timeSegmentStart": "1.2s",
    "timeSegmentEnd": "3.4s",
    "frames": [{
      "timeOffset": "1.2s",
      "xMin": 0.1,
      "xMax": 0.2,
      "yMin": 0.3,
      "yMax": 0.4
    }, {
      "timeOffset": "3.4s",
      "xMin": 0.2,
      "xMax": 0.3,
      "yMin": 0.4,
      "yMax": 0.5,
    }],
    "confidence": 0.7
  }, {
    "id": "1",
    "displayName": "cat",
    "timeSegmentStart": "4.8s",
    "timeSegmentEnd": "4.8s",
    "frames": [{
      "timeOffset": "4.8s",
      "xMin": 0.2,
      "xMax": 0.3,
      "yMin": 0.4,
      "yMax": 0.5,
    }],
    "confidence": 0.6
  }, {
    "id": "2",
    "displayName": "dog",
    "timeSegmentStart": "1.2s",
    "timeSegmentEnd": "3.4s",
    "frames": [{
      "timeOffset": "1.2s",
      "xMin": 0.1,
      "xMax": 0.2,
      "yMin": 0.3,
      "yMax": 0.4
    }, {
      "timeOffset": "3.4s",
      "xMin": 0.2,
      "xMax": 0.3,
      "yMin": 0.4,
      "yMax": 0.5,
    }],
    "confidence": 0.5
  }]
}

Receber previsões