プライベート・エンド・ポイントの管理

プライベート・エンドポイントは、仮想クラウド・ネットワーク(VCN)内のOCI生成AIモデルへのセキュアなプライベート・アクセスを提供します。オンデマンド・モデル、および専用AIクラスタでホストされる事前トレーニング済モデルとカスタム・モデルのプライベート・エンドポイントを作成できます。

情報

プライベート・エンドポイントは、OCIサービスへのプライベート・アクセスを提供するVCN内のプライベートIPアドレスです。生成AIの場合、プライベート・エンドポイントを使用すると、VCN内から大規模言語モデルにアクセスできます。このサービスは、選択したプライベート・サブネットにプライベート・エンドポイントを作成し、その可用性を維持します。アクセスは、ルーティング、セキュリティ・リストおよびネットワーク・セキュリティ・グループ(NSG)を使用して制御します。

プライベート・エンドポイントについておよびセキュリティ・ルールについて学習します。

OCI生成AIでプライベート・エンドポイントを作成すると、「オンデマンド・モードでの使用を許可」を選択したかどうかに関係なく、プライベート・エンドポイントの完全修飾ドメイン名(FQDN)を受け取ります。プライベート・エンドポイントを使用して、次のことを行います。

  • 専用AIクラスタ上のエンドポイントにアタッチして、プライベート・エンドポイントを介してクラスタ(およびそのホストされたモデル)にアクセスします。
  • 「オンデマンド・モードでの使用を許可」を有効にした場合は、オンデマンド・モデルにアクセスします。

リージョン

プライベート・エンドポイントは、モデルが使用可能な商用(OC1)、政府(OC4)およびソブリン(OC19)リージョンのリージョン別生成AIモデル・ページにリストされているすべてのモデルでサポートされます。

アクセス

プライベート・エンドポイントを介してモデルにアクセスするには、エンドポイント・サブネットへのプライベート接続を持つネットワークからクライアントを実行し、プライベート・エンドポイントFQDNを使用してモデルをコールします。

一般的なアクセス・パスは次のとおりです。

  • 同じVCN: VCN内のサブネット(ルーティング、ネットワーク・セキュリティ・グループ(NSG)およびセキュリティ・リストの対象)から。
  • ピアリングされたVCNs:ローカル・ピアリング・ゲートウェイ(LPG)または動的ルーティング・ゲートウェイ(DRGベース)接続(ハブアンドスポーク)を介して行われます。
  • オンプレミス/その他のプライベート・ネットワーク:インターネット・プロトコル・セキュリティ(IPSec) VPNまたはFastConnectを介してDRGに。
  • 管理: OCI Bastionを使用してVCN内のプライベート・ホストにアクセスし、そこからエンドポイントをコールします。
ノート

プライベート・エンドポイントFQDNがプライベートIPに解決されることを確認します。

制限

デフォルトでは、テナンシには最大5つのプライベート・エンドポイントを含めることができます。さらに作成するには、生成AIサービスのprivate-endpoint-countサービス制限の引上げをリクエストします。