Modelos compatíveis do Google
Você pode importar grandes modelos de linguagem de buckets do Hugging Face e do OCI Object Storage para o OCI Generative AI, criar pontos finais para esses modelos e usá-los no serviço Generative AI.
As séries Gemma do Google, incluindo os modelos de código aberto Gemma2 e Gemma3, foram criadas para atender às necessidades de processamento de linguagem e alta versatilidade. Para obter mais informações, consulte Gemma2 e Gemma3 na documentação do Hugging Face.
Gemma
| Abraçando o ID do modelo facial | Capacidade do Modelo | Forma Recomendada da Unidade de Cluster de IA Dedicada |
|---|---|---|
| google/gemma-3-4b-it | IMAGE_TEXT_TO_TEXT | A100_80G_X1 |
| google/gemma-3-270m-it | TEXT_TO_TEXT | A100_80G_X1 |
| google/gemma-3-27b-it | IMAGE_TEXT_TO_TEXT | A100_80G_X2 |
| google/gemma-3-12b-it | IMAGE_TEXT_TO_TEXT | A100_80G_X1 |
| google/gemma-3-1b-it | TEXT_TO_TEXT | A100_80G_X1 |
| google/gemma-2-9b-it | TEXT_TO_TEXT | A100_80G_X1 |
| google/gemma-2-27b-it | TEXT_TO_TEXT | A100_80G_X2 |
| google/gemma-2-2b-it | TEXT_TO_TEXT | A100_80G_X1 |
-
Embora você possa importar qualquer modelo de chat, incorporação (e ajuste fino) validado por meio do Open Model Engine (com runtime vLLM ou SGLang), apenas os modelos listados explicitamente nesta página foram avaliados para essa família de modelos pela Oracle em relação aos tempos de execução do modelo de código-fonte aberto e testados nas configurações de GPU suportadas pela Oracle. Não obstante o precedente, a Oracle não é responsável por nenhum problema relacionado ao desempenho, disponibilidade, operação ou segurança dos Modelos Compatíveis. Modelos não listados podem ter problemas de compatibilidade e recomendamos que você teste qualquer modelo não listado antes do uso da produção. Saiba mais sobre a OCI Generative AI Imported Model Architecture.
- Para modelos importados, você pode usar o tamanho do contexto nativo especificado pelo provedor do modelo. No entanto, o tamanho máximo de contexto efetivo é limitado pela configuração de hardware subjacente que você seleciona para hospedar clusters de IA dedicados na OCI Generative AI. Para aproveitar ao máximo o tamanho do contexto nativo de um modelo, talvez seja necessário provisionar mais recursos de hardware.
- Use os modelos ajustados somente se eles corresponderem à versão do transformador do modelo base compatível e tiverem uma contagem de parâmetros dentro de ± 10% do original.
- Para obter o hardware disponível e as etapas sobre como implantar os modelos importados, consulte Gerenciando Modelos Importados.
- Se a forma de unidade compatível não estiver disponível na região, selecione uma opção de camada superior. Por exemplo, se a A100 não estiver disponível, selecione H100.