Modelos compatíveis de GptOss OpenAI
Você pode importar grandes modelos de linguagem de Hugging Face e buckets do OCI Object Storage para a OCI Generative AI, criar pontos finais para esses modelos e usá-los no serviço Generative AI.
Esses modelos têm uma arquitetura avançada de transformador de peso aberto com arquitetura Mixture-of-Experts (MoE), otimizada para raciocínio de linguagem eficiente e de alta qualidade e grande tratamento de contexto. Para obter mais informações, consulte GptOss na documentação do Hugging Face.
GptOss
| Abraçando o ID do modelo facial | Capacidade do Modelo | Forma Recomendada da Unidade de Cluster de IA Dedicada |
|---|---|---|
| openai/gpt-oss-20b | TEXTO_PARA_TEXTO | H100_X1 |
| openai/gpt-oss-120b | TEXTO_PARA_TEXTO | H100_X2 |
Importante
- Para modelos importados, você pode usar o tamanho do contexto nativo especificado pelo provedor do modelo. No entanto, o tamanho máximo de contexto efetivo é limitado pela configuração de hardware subjacente que você seleciona para hospedar clusters de IA dedicados na OCI Generative AI. Para aproveitar ao máximo o tamanho do contexto nativo de um modelo, talvez seja necessário provisionar mais recursos de hardware.
- Use os modelos ajustados somente se eles corresponderem à versão do transformador do modelo base compatível e tiverem uma contagem de parâmetros dentro de ± 10% do original.
- Para obter o hardware disponível e as etapas sobre como implantar os modelos importados, consulte Gerenciando Modelos Importados.