Paramètres de performance des modèles pour les modèles personnalisés dans l'IA générative
Lorsque vous créez un modèle personnalisé, le service d'intelligence artificielle générative pour OCI règle avec précision un modèle préentraîné à l'aide du jeu de données. Une fois le réglage de précision terminé, vous pouvez accéder aux paramètres de performance du modèle dans la page de détails du modèle pour décider si le modèle s'est amélioré pour le cas d'utilisation après le réglage de précision du jeu de données. Les paramètres de performance du modèle sont calculés sur le jeu de données de validation.
Paramètres de performance du modèle pour les grands modèles de langage
Les mesures suivantes s'appliquent aux modèles personnalisés.
- Exactitude
- Mesure si les jetons générés correspondent aux jetons annotés. Par exemple, une précision de 0,9 signifie que 90 % des jetons de sortie correspondaient aux jetons du jeu de données.
- Perte
- L'exactitude indique le nombre de prédictions incorrectes obtenues par le modèle, et la perte mesure le degré d'erreur des sorties générées d'un modèle. Une perte de 0 signifie que toutes les sorties étaient parfaites, tandis qu'un grand nombre indique des sorties très aléatoires. La perte diminue à mesure qu'un modèle s'améliore.