Oracle Cloud Infrastructureドキュメント

xAI Grok 3 Mini Fast

xai.grok-3-mini-fastモデルは、応答する前に考える軽量モデルです。深いドメイン知識を必要としないロジックベースのタスクに、高速でスマート、かつ最適です。生の思考追跡はアクセス可能です。

xai.grok-3-miniモデルとxai.grok-3-mini-fastモデルでは、どちらも同じ基礎となるモデルを使用し、同じレスポンス品質を提供します。違いは、それらの提供方法にあります。xai.grok-3-mini-fastモデルは、より高速なインフラストラクチャで提供され、標準のxai.grok-3-miniモデルよりも大幅に高速な応答時間を提供します。高速化は、出力トークン当たりのコストが高くなります。

xai.grok-3-miniモデルとxai.grok-3-mini-fastモデルは、同じ基礎となるモデルを指しています。レイテンシの影響を受けるアプリケーションではxai.grok-3-mini-fastを選択し、コストを削減する場合はxai.grok-3-miniを選択します。

これらのリージョンで使用可能

  • 米国東部(アッシュバーン)(オンデマンドのみ)
  • 米国中西部(シカゴ)(オンデマンドのみ)
  • 米国西部(フェニックス)(オンデマンドのみ)
重要

外部コール

xAI Grokモデルは、xAI用にプロビジョニングされたテナンシ内のOCIデータ・センターでホストされます。OCI Generative AIサービスを介してアクセスできるxAI Grokモデルは、xAIによって管理されます。

主な機能

  • OCI生成AIのモデル名: xai.grok-3-mini
  • 使用可能なオンデマンド:コンソール・プレイグラウンドまたはAPIを介して、このモデルにオンデマンドでアクセスします。
  • テキスト・モードのみ:テキストを入力し、テキスト出力を取得します。(イメージのサポートはありません。)
  • 高速:深いドメイン知識を必要としないロジックベースのタスクに最適です。
  • コンテキスト長: 131,072トークン(最大プロンプト+レスポンス長は、コンテキストを保持するための131,072トークンです)。プレイグラウンドでは、実行ごとにレスポンスの長さが16,000トークンに制限されますが、コンテキストは131,072トークンのままです。
  • ファンクション・コール: APIを介してはい。
  • 構造化出力:はい。
  • 推論あり:はい。「モデル・パラメータ」の項のreasoning_effortパラメータを参照してください。
  • ナレッジ・カットオフ: 2024年11月

  • キャッシュされた入力トークン:はい

    重要なノート:キャッシュされた入力機能は、プレイグラウンドとAPIの両方で使用できます。ただし、その情報はAPIを介してのみ取得できます。

制限

トークン/分(TPM)

このモデルへの推論コールは、顧客またはテナンシ当たり100,000トークン/分(TPM)に制限されます。

テナンシの現在の制限を確認するには、コンソールで「ガバナンスと管理」に移動します。「テナンシ管理」で、「制限、割当ておよび使用状況」を選択します。「サービス」で、「生成AI」を選択し、サービス制限を確認します。サービス制限の引き上げをリクエストするには、「サービス制限の引き上げをリクエスト」を選択します。TPM制限の引き上げには、次の制限名を使用します。grok-3-mini-chat-tokens-per-minute-count

オンデマンドモード

ノート

Grokモデルは、オンデマンド・モードでのみ使用できます。

モデル名 OCIモデル名 価格設定ページ製品名
xAI Grok 3 Mini Fast xai.grok-3-mini-fast xAI – Grok 3 Mini Fast
オンデマンドと専用の2つのモードを使用して、生成AIで事前にトレーニングされた基本モデルにアクセスできます。 オンデマンド・モードの主な機能は次のとおりです。

  • プレイグラウンドでモデルを使用する場合、またはAPIを介してモデルをコールする場合に、推論コールごとに支払いをするようにします。

  • 生成AIの使用を開始するための障壁が低くなります。
  • 実験、概念実証、モデル評価に最適です。
  • リストされていないリージョンの事前トレーニング済モデルで使用可能です(専用AIクラスタのみ)。

リリース日

モデル ベータ・リリース日 一般提供リリース日 オンデマンド除・売却日 専用モード除・売却日
xai.grok-3-mini-fast 2025-05-22 2025-06-24 暫定 このモデルは専用モードには使用できません。
重要

すべてのモデル時間明細および除・売却詳細のリストは、モデルの除・売却を参照してください。

モデル・パラメータ

モデル・レスポンスを変更するには、プレイグラウンドまたはAPIで次のパラメータの値を変更できます。

最大出力トークン

各レスポンスに対してモデルで生成するトークンのの最大数。トークンごとに4文字を見積もります。チャット・モデルを要求するため、レスポンスはプロンプトに依存し、各レスポンスは必ずしも最大割当てトークンを使用する必要はありません。プロンプト+出力の最大長は、実行ごとに131,072トークンです。プレイグラウンドでは、実行ごとに最大出力トークンが16,000トークンに制限されます。

温度

出力テキストの生成に使用されるランダム性のレベル。最小: 0、最大: 2

ヒント

温度の設定を0で開始し、出力を改良のためにプロンプトを再生成するときに温度を上げます高温は幻覚をもたらし、事実上誤った情報をもたらす可能性があります。
上位p

次のトークンで考慮する上位トークンの累積確率を制御するサンプリング・メソッド。最小: 0、最大: 1。

確率として、pに0から1までの小数を割り当てます。たとえば、上位75パーセントが考慮される場合は0.75と入力します。すべてのトークンを考慮するには、pを1に設定します。

推論の取り組み

コンソールではなくAPIを介して使用可能なreasoning_effortパラメータは、モデルが応答する前に思考に費やす時間を制御します。次のいずれかの値に設定する必要があります。

  • low: 思考時間が最小限で、応答を迅速に行うために使用するトークンが少なくなります。
  • high: 複雑な問題のためにより多くのトークンを活用する最大思考時間。

正しいレベルの選択は、タスクによって異なります。迅速に完了する単純な問合せにはlowを使用し、レスポンス・レイテンシが重要でない困難な問題にはhighを使用します。このパラメータの詳細は、xAIガイドを参照してください。