Interpretare i risultati delle previsioni da modelli di classificazione del testo

Dopo aver richiesto una previsione, Vertex AI restituisce i risultati in base all'obiettivo del modello. Le previsioni dei modelli di classificazione con più etichette restituiscono una o più etichette per ogni documento e un punteggio di confidenza per ogni etichetta. Per i modelli di classificazione con etichetta singola, le previsioni restituiscono solo un'etichetta e un punteggio di affidabilità per documento.

Il punteggio di confidenza indica il livello di associazione del modello a ogni classe o etichetta a un elemento di test. Più elevato è il numero, maggiore è la confidenza del modello che l'etichetta debba essere applicata a quell'elemento. Sei tu a decidere quanto deve essere alto il punteggio di confidenza affinché tu possa accettare i risultati del modello.

Cursore della soglia di punteggio

Nella console Google Cloud, Vertex AI fornisce un cursore utilizzato per regolare la soglia di confidenza per tutte le classi o le etichette oppure per una singola classe o etichetta. Il cursore è disponibile nella pagina dei dettagli di un modello nella scheda Valuta. La soglia di confidenza è il livello di confidenza che il modello deve avere per assegnare una classe o un'etichetta a un elemento di test. Man mano che regoli la soglia, puoi vedere come cambiano la precisione e il richiamo del modello. Soglie più alte in genere aumentano la precisione e riducono il richiamo.

Esempio di output di previsione batch

L'esempio seguente è il risultato previsto per un modello di classificazione con più etichette. Il modello ha applicato le etichette GreatService, Suggestion e InfoRequest al documento inviato. I valori di confidenza si applicano a ogni etichetta in ordine. In questo esempio, il modello ha previsto GreatService come etichetta più pertinente.

{
  "instance": {"content": "gs://bucket/text.txt", "mimeType": "text/plain"},
  "predictions": [
    {
      "ids": [
        "1234567890123456789",
        "2234567890123456789",
        "3234567890123456789"
      ],
      "displayNames": [
        "GreatService",
        "Suggestion",
        "InfoRequest"
      ],
      "confidences": [
        0.8986392080783844,
        0.81984345316886902,
        0.7722353458404541
      ]
    }
  ]
}