互換性のあるMoonshot AI Kimiモデル
大規模言語モデルをHugging FaceおよびOCI Object StorageバケットからOCI生成AIにインポートし、それらのモデルのエンドポイントを作成して生成AIサービスで使用できます。
モデルを選択する前に、このページのモデル表に従って、互換性のあるハードウェア・ユニット・シェイプを選択し、インポートされたモデルをホストする専用AIクラスタの請求を理解するためのガイダンスを確認します。
Kimi
Kimi K2.6およびKimi K2.7 Codeモデルは、長期のコーディング、エージェント・ワークフローおよび複雑なソフトウェア・エンジニアリング・タスク用に最適化されています。Kimi K2.6は、コーディング、コーディングドリブンな設計、自律的な実行およびタスク・オーケストレーション用に設計されており、Kimi K2.7 Codeは、長期にわたるソフトウェア・エンジニアリング・ワークフロー用にKimi K2.6上に構築されたコーディング重視のモデルです。
| Hugging FaceモデルID | モデル機能 | 最小専用AIクラスタ・ユニット・シェイプ |
|---|---|---|
| Moonshotai/Kimi-K3 | イメージ・テキストからテキストへ |
|
| Moonshotai/キミ-K2.6 | テキスト間_テキスト |
|
| moonshotai/Kimi-K2.7コード | テキスト間_テキスト |
|
Kimi K3の場合、
H100_X32ユニット・シェイプは米国中西部(シカゴ)リージョンと日本中部(大阪)リージョンで使用でき、B200_X16ユニット・シェイプはUAE中央部(アブダビ)リージョンで使用できます。UAE中央部(アブダビ)および日本中央部(大阪)リージョンでもマルチノード・サービングが可能です。- インポートされたモデルの場合は、モデル・プロバイダによって指定されたネイティブ・コンテキスト長を使用できます。ただし、効果的な最大コンテキスト長は、OCI生成AIでホスティング専用AIクラスタに選択する基礎となるハードウェア設定によって制限されます。モデルのネイティブ・コンテキスト長を最大限に活用するには、より多くのハードウェア・リソースをプロビジョニングする必要がある場合があります。
- ファインチューニング・モデルは、互換性のあるベース・モデルのトランスフォーマ・バージョンと一致し、パラメータ数が元のモデルの±10%以内である場合にのみ使用します。
- インポートしたモデルをホストできる場所を決定するには、このページの表でモデルの互換性のあるユニット・シェイプを見つけ、「リージョン別のハードウェア・ユニット・シェイプ」のターゲット・リージョンでハードウェア・シェイプが使用可能であることを確認します。モデルをリージョンでホストできるのは、リージョンがそのモデルにリストされたハードウェア・シェイプを提供する場合のみです。
- インポートされたモデルをデプロイするステップは、「インポートされたモデルの管理」を参照してください。
インポートされたモデルをホストする専用AIクラスタの請求
インポートされたモデルをホストする専用AIクラスタでは、OCI Generative AIで利用可能な事前トレーニング済みモデルをホストする専用AIクラスタに適用される744ユニットの最小コミットメントは必要ありません。かわりに、インポートされたモデルの専用AIクラスタには、請求可能な最小期間は1時間です。たとえば、1つのAIユニットを使用し、30分間実行されるクラスタは、1つのAIユニット時間に対して請求されます。
最初の1時間後、料金はクラスタの実際の稼働時間に基づいており、ミリ秒に按分されます。たとえば、1時間1分間実行されるクラスタは、2時間ではなく、その期間について請求されます。
OCIは、クラスタの実行中に5分ごとに使用量レコードをMetering and Billingに送信します。最小1時間に達する前にクラスタが削除された場合、OCIは最小値を満たすまで請求可能な使用量を報告し続けます。クラスタが1時間以上実行された場合、OCIはクラスタが削除されるまで、使用状況レコードの送信を5分ごとに続けます。