ルーティング・プロファイルの管理
ルーティング・プロファイルは、OCI Generative AIが、ユーザーが選択したOCIリージョン間でオンデマンド・モデル・リクエストをルーティングする方法を定義します。
ルーティング・プロファイルは、サポートされている1つのオンデマンド・モデルと、そのモデルが使用可能な同じレルム内の1つ以上のターゲットOCIリージョンを指定します。サポートされる推論リクエストでルーティング・プロファイルを参照する場合、生成AIはプロファイル内のターゲット・リージョン間でのみリクエストをルーティングします。
ルーティング・プロファイルを使用して、アプリケーション側のクロスリージョン・ルーティングを構築せずに、承認された地域スコープ全体で選択したオンデマンド・モデルにアクセスします。各モデルのリージョンごとの可用性については、リージョン別の生成AIモデルを参照してください。
ノート
このリリースでは、オンデマンド・モデルのルーティング・プロファイルのみがサポートされています。
このリリースでは、オンデマンド・モデルのルーティング・プロファイルのみがサポートされています。
次のタスクを実行して、ルーティング・プロファイルを作成および管理できます: