Paramètres de performances des modèles pour les modèles personnalisés dans Generative AI
Lorsque vous créez un modèle personnalisé, OCI Generative AI affine un modèle préentraîné avec l'ensemble de données. Une fois l'affinage terminé, vous pouvez accéder aux paramètres de performance du modèle sur la page de détails du modèle afin de déterminer si celui-ci s'est amélioré pour votre cas d'emploi après l'affinage sur l'ensemble de données. Les paramètres de performances du modèle sont calculés sur l'ensemble de données de validation.
Paramètres de performances des modèles pour les grands modèles de langage
Les mesures suivantes s'appliquent aux modèles personnalisés.
- Précision
- Mesure la correspondance entre les jetons générés et les jetons annotés. Par exemple, une précision de 0,9 signifie que 90 % des jetons de sortie correspondaient aux jetons de l'ensemble de données.
- Perte
- La précision vous indique le nombre de prédictions erronées du modèle, et la perte mesure l'erreur des sorties générées d'un modèle. Une perte de 0 signifie que toutes les sorties étaient parfaites, tandis qu'un grand nombre indique des sorties très aléatoires. La perte diminue à mesure qu'un modèle s'améliore.