Paramètres de performance de modèle pour les modèles personnalisés dans l'IA générative
Lorsque vous créez un modèle personnalisé, OCI Generative AI affine un modèle préentraîné avec l'ensemble de données. Une fois l'affinage terminé, vous pouvez accéder aux paramètres de performances du modèle sur la page de détails du modèle pour déterminer si celui-ci s'est amélioré pour votre cas d'emploi après l'affinage sur l'ensemble de données. Les paramètres de performances du modèle sont calculés sur le jeu de données de validation.
Paramètres de performance de modèle pour les modèles de génération
Les mesures suivantes s'appliquent aux modèles personnalisés.
- Précision
- Mesure la correspondance entre les jetons générés et les jetons annotés. Par exemple, une précision de 0,9 signifie que 90 % des jetons de sortie correspondaient aux jetons de l'ensemble de données.
- Perte
- La précision vous indique le nombre de prédictions erronées du modèle, et la perte mesure l'erreur des sorties générées d'un modèle. Une perte de 0 signifie que toutes les sorties étaient parfaites, tandis qu'un grand nombre indique des sorties très aléatoires. La perte diminue à mesure qu'un modèle s'améliore.