Créer le service LLM
L'état du composant LLM dans le flux de dialogue accède au modèle au moyen d'un service LLM de niveau compétence, qui combine un service LLM de niveau instance avec l'un des programmes de traitement de transformation de la compétence. Un service LLM est un artefact de niveau compétence.
Pour configurer ce service :
. Pour ignorer cet avertissement, sélectionnez le service REST (accessible au moyen de paramètres > services d'API), puis cliquez sur Convertir en GML.
- Sélectionnez Paramètres > Configuration.
- Dans la section Services de modèle LLM de grande taille de la page, cliquez sur + Nouveau service LLM.
- Terminez la ligne :
- Nom : Entrez un nom facilement identifiable pour le service LLM. Il s'agit du nom que vous choisirez lorsque vous configurerez le flux de dialogue.
- Service LLLM : Sélectionnez un des services LLLM configurés pour l'instance.
- Programme de traitement de transformation : Sélectionnez le programme de traitement de transformation qui est la contrepartie du service LLM. Par exemple, si le composant LLM utilise le service LLM Azure OpenAI pour générer des réponses, vous choisissez l'un des programmes de traitement d'événements de la compétence qui transforme les données utiles Azure OpenAI en CLMI.
- Mock (Marquer) : Activez cette option (Vrai) pour gagner du temps et des coûts lors du test de votre flux de dialogue. Étant donné que cette option permet au composant LLM de retourner une réponse statique au lieu de la suite générée par LLM, vous n'avez pas à perdre de temps à attendre la réponse LLM, ni à engager des coûts auprès du fournisseur de services LLM lorsque vous testez simplement une partie du flux de dialogue.
Note
Vous ne pouvez utiliser cette option que si le service LLM que vous avez sélectionné a une réponse statique de 200. - Valeur par défaut : Si vous activez cette option (vrai), le service LLM est défini comme sélection par défaut dans le menu LLM Service du composant LLM. Si un service LLM existant est déjà défini par défaut, son statut par défaut est remplacé (c'est-à-dire réglé à Faux) lorsque vous activez cette option pour un autre service LLM.
- Cliquez sur l'action Enregistrer (située à droite).
