Parametri delle prestazioni del modello per i modelli personalizzati nell'AI generativa
Quando crei un modello personalizzato, l'AI generativa OCI ottimizza un modello pre-addestrato con il data set. Al termine dell'ottimizzazione, è possibile accedere ai parametri delle prestazioni del modello nella pagina dei dettagli del modello per determinare se il modello è stato migliorato per il caso d'uso dopo l'ottimizzazione nel data set. I parametri delle prestazioni del modello vengono calcolati nel data set di convalida.
Parametri prestazioni modello per modelli di lingua di grandi dimensioni
Le metriche riportate di seguito si applicano ai modelli personalizzati.
- Precisione
- Misura se i token generati corrispondono ai token con annotazioni. Ad esempio, un'accuratezza di 0,9 significa che il 90% dei token di output corrisponde ai token nel data set.
- Perdita
- L'accuratezza indica il numero di previsioni errate dal modello e la perdita misura quanto siano errati gli output generati da un modello. Una perdita di 0 significa che tutte le uscite erano perfette, mentre un gran numero indica uscite altamente casuali. La perdita diminuisce man mano che un modello migliora.