Paramètres de performances des modèles pour les modèles personnalisés dans Generative AI
Lorsque vous créez un modèle personnalisé, OCI Generative AI affine un modèle préentraîné avec l'ensemble de données. Une fois le réglage fin terminé, vous pouvez accéder aux paramètres de performance du modèle sur la page de détails du modèle pour décider si le modèle s'est amélioré pour le cas d'emploi après le réglage fin sur l'ensemble de données. Les paramètres de performances du modèle sont calculés sur l'ensemble de données de validation.
Paramètres de performances de modèle pour les modèles de langage volumineux
Les mesures suivantes s'appliquent aux modèles personnalisés.
- Précision
- Mesure si les jetons générés correspondent aux jetons annotés. Par exemple, une précision de 0,9 signifie que 90 % des sème de sortie correspondaient aux sème de l'ensemble de données.
- Perte
- La précision indique combien de prédictions le modèle s'est trompé, tandis qu'un nombre élevé indique les sorties générées d'un modèle. Une perte de 0 signifie que toutes les sorties étaient parfaites, tandis qu'un grand nombre indique des sorties très aléatoires. La perte diminue à mesure qu'un modèle s'améliore.