Évaluations

Évaluation de la performance du modèle à l'aide d'actions rapides de l'intelligence artificielle

Avec les modèles déployés, vous pouvez créer une évaluation de modèle pour évaluer sa performance. Vous pouvez sélectionner un jeu de données dans le stockage d'objets ou en charger un à partir du stockage du carnet dans lequel vous travaillez. Pour charger des jeux de données à partir de votre carnet, vous devez d'abord configurer des politiques qui permettent à la session de carnet d'écrire des fichiers dans le stockage d'objets. Vous pouvez étiqueter votre évaluation de modèle avec un nom d'expérience. Vous pouvez sélectionner une expérience existante ou en créer une nouvelle. BERTScore, BLEU Score, Perplexity Score, Text Readability et ROUGE sont les mesures d'évaluation disponibles pour mesurer la performance du modèle. Vous pouvez enregistrer le résultat de l'évaluation du modèle dans le stockage d'objets. Vous pouvez définir les paramètres d'évaluation du modèle. Sous Options avancées, vous pouvez sélectionner la forme de l'instance de calcul pour l'évaluation et éventuellement entrer la séquence Arrêter. En outre, vous pouvez configurer la journalisation avec votre évaluation de modèle pour la surveiller. La journalisation est facultative, mais nous la recommandons pour aider à résoudre les erreurs lors de l'évaluation. Vous devez disposer de la politique nécessaire pour activer la journalisation. Pour plus d'informations sur la journalisation, voir la section Journaux. Vous pouvez vérifier les configurations et les paramètres de votre évaluation avant de la créer.

Si vous revenez à l'onglet Évaluation, l'état du cycle de vie de l'évaluation est Succeeded lorsque l'évaluation du modèle est terminée. Vous pouvez voir le résultat de l'évaluation et télécharger une copie du rapport d'évaluation du modèle sur votre ordinateur local.