Modèles OpenAI GptOss compatibles
Vous pouvez importer de grands modèles de langage à partir de seaux de stockage d'objets Hugging Face et OCI dans le service d'intelligence artificielle générative pour OCI, créer des points d'extrémité pour ces modèles et les utiliser dans le service d'intelligence artificielle générative.
Ces modèles sont dotés d'une architecture de transformateur à poids ouvert avancée avec architecture de mélange d'experts (MoE), optimisée pour un raisonnement linguistique efficace et de haute qualité et une gestion de contexte étendue. Pour plus d'informations, voir GptOss dans la documentation sur Hugging Face.
GptOss
| ID modèle de visage Hugging | Capacité du modèle | Forme d'unité de grappe dédiée à l'IA recommandée |
|---|---|---|
| openai/gpt-oss-20b | TEXTE_TO_TEXT | H100_X1 — |
| openai/gpt-oss-120b | TEXTE_TO_TEXT | H100_X2 — |
Important
- Pour les modèles importés, vous pouvez utiliser la longueur de contexte natif spécifiée par le fournisseur de modèle. Toutefois, la longueur de contexte maximale en vigueur est limitée par la configuration matérielle sous-jacente que vous sélectionnez pour les grappes d'IA dédiées à l'hébergement dans l'IA générative OCI. Pour tirer pleinement parti de la longueur du contexte natif d'un modèle, vous devrez peut-être provisionner plus de ressources matérielles.
- Utilisez les modèles affinés uniquement s'ils correspondent à la version du transformateur du modèle de base compatible et ont un nombre de paramètres inférieur à ± 10 % de l'original.
- Pour le matériel disponible et les étapes de déploiement des modèles importés, voir Gestion des modèles importés.