生成AIでのデータ処理

インポート済モデル

推論リクエストはHugging Faceに送信されますか。

推論リクエストは、インポートされたモデルをホストする専用AIクラスタで実行されます。Hugging Faceからモデルをインポートすると、デプロイメント用のモデル・アーティファクトが取得されます。推論リクエストをHugging Faceに送信しません。「インポートの互換性のあるモデル」を参照してください。

プロンプトと応答は保持されていますか、それともモデルのトレーニングに使用されていますか。

このサービスでは、モデルの推論の一部としてプロンプトおよび応答は保持されません。モデル・プロバイダは、独自のモデル・トレーニングやモデル改善、その他の独立した目的では使用しません。

OCI機能を使用して、アプリケーションのレスポンス、会話、ファイルまたはメモリーを保存できます。このコンテンツの管理方法については、「格納されたレスポンス、会話、ファイルおよびメモリー」を参照してください。

モデルをインポートするときにトレーニング・データを提供する必要はありますか。

インポート・ワークフローには、重み、構成、トークン化ファイルなどのモデル・ファイルが必要です。モデルのトレーニングに使用されるデータセットは必要ありません。

サービスの外部で微調整した互換性のあるモデルをインポートできます。OCI Generative AIでは、インポートされたモデルは微調整されません。「ファインチューニング・モデルのインポート」を参照してください。

インポートしたモデルは削除できますか。

インポートされたモデル・リソースを削除できます。このリソースは、個々の推論リクエストとは別に管理します。「インポートされたモデルの削除」を参照してください。

専用AIクラスタでの事前トレーニング済およびファインチューニング済モデル

プロンプトは外部モデル・プロバイダに送信されますか。

プロンプトは専用AIクラスタのモデルによって処理され、推論のために外部プロバイダに送信されません。クラスタは自分のモデル専用であり、他の顧客と共有しません。Dedicated AI Clustersを参照してください。

プロンプトと応答は保持されていますか、それともモデルのトレーニングに使用されていますか。

このサービスでは、モデルの推論の一部としてプロンプトおよび応答は保持されません。モデル・プロバイダは、独自のモデル・トレーニングやモデル改善、その他の独立した目的では使用しません。

OCI機能を使用して、アプリケーションのレスポンス、会話、ファイルまたはメモリーを保存できます。このコンテンツの管理方法については、「格納されたレスポンス、会話、ファイルおよびメモリー」を参照してください。

OCI Generative AIで微調整できるのはどのモデルですか。

現在、サービスでファインチューニングに使用できるモデルは、標準のMeta Llama 3.3 (70B)モデル(meta.llama-3.3-70b-instruct)のみです。ファインチューニングは、サポートされている商用(OC1)リージョンで使用できます。動的FP8バリアントは、ファインチューニングに使用できません。

サービスでは、ファインチューニング後にトレーニング・データが保持されますか。

このサービスは、トレーニング・ジョブが完了すると、ファインチューニング・クラスタからトレーニング・データを削除します。ソース・データセットは、管理するObject Storageバケットに残ります。また、結果のカスタム・モデルを個別のリソースとして管理します。

トレーニング・データまたはカスタム・モデルはモデル・プロバイダと共有されますか。

このサービスは、ファインチューニング・トレーニング・データやファインチューニング・カスタム・モデルをサードパーティのモデル・プロバイダと共有しません。トレーニング・データはカスタム・モデルの構築にのみ使用され、一般的なOCI生成AIモデルの改善には使用されません。生成AIでのベース・モデルのファインチューニングを参照してください。

トレーニング・データは暗号化されますか。

トレーニング・データのファインチューニングは、保存時と転送時に暗号化されます。暗号化および鍵管理の詳細は、Encryptionを参照してください。

オンデマンド・モデル

モデルが外部プロバイダに電話をかけるかどうかを確認するにはどうすればよいですか。

「リージョン別モデル」で、リクエストに対応するモデルとOCIリージョンを見つけます。ルーティング・プロファイルを使用する場合は、そのターゲットOCIリージョンを確認します。「外部コール」ノートでは、Google GeminiやxAI Grokなどのモデルが識別され、そのリクエストは処理のために外部プロバイダに送信されます。

Google GeminiおよびxAI Grok

プロンプトはGoogleまたはxAIに送信されますか。

OCI Generative AIを介してこれらのモデルを呼び出すと、サービスによってリクエスト・コンテンツがGoogleまたはxAIに送信され、プロバイダのプラットフォームで処理され、生成されたレスポンスが返されます。

GoogleまたはxAIは、プロンプトと応答を保持できますか?それとも、モデル・トレーニングに使用しますか?

Oracleは、OCI Generative AIを介してアクセスされるモデルについて、GoogleおよびxAIとの契約に基づくゼロ・データ保持契約を結んでいます。これらの契約では、プロバイダは顧客プロンプトおよび応答を使用して、要求を処理し、応答を配信します。リクエストを処理した後、または独自のモデル・トレーニング、モデル改善またはその他の独立した目的のためにこのコンテンツを使用した後は、このコンテンツを保持しません。

OCI Generative AIは、プロンプトと応答を保持しますか?

このサービスでは、モデルの推論の一部としてプロンプトおよび応答は保持されません。

OCI機能を使用して、アプリケーションのレスポンス、会話、ファイルまたはメモリーを保存できます。このコンテンツの管理方法については、「格納されたレスポンス、会話、ファイルおよびメモリー」を参照してください。

GoogleとxAIはどこでリクエストを処理しますか?

処理場所は、リクエストを処理するモデルおよびOCIリージョンによって異なります。ルーティング・プロファイルを使用する場合は、リクエストを処理するターゲットOCIリージョンのノートを使用します。これは、プロファイルを作成またはコールするリージョンとは異なる場合があります。外部コールのノートのモデル固有のルーティングおよび処理の場所を参照してください。

Cohere、Meta LlamaおよびOpenAI gpt-oss

推論要求は外部モデル・プロバイダに送信されますか。

オンデマンド・モードで提供されるCohere、Meta LlamaおよびOpenAI gpt-ossモデルは、OCI Generative AIによってホストされます。サービスは、推論のために外部プロバイダに送信せずにリクエストを処理します。サポートされているモデルおよびリージョンについては、リージョン別モデルを参照してください。

プロンプトと応答は保持されていますか、それともモデルのトレーニングに使用されていますか。

このサービスでは、モデルの推論の一部としてプロンプトおよび応答は保持されません。モデル・プロバイダは、独自のモデル・トレーニングやモデル改善、その他の独立した目的では使用しません。

OCI機能を使用して、アプリケーションのレスポンス、会話、ファイルまたはメモリーを保存できます。このコンテンツの管理方法については、「格納されたレスポンス、会話、ファイルおよびメモリー」を参照してください。

ルーティング・プロファイルを介したオンデマンド・モデル

ローカル・モデル処理がないリージョンからオンデマンド・モデルをコールする場合、どのデータ処理ルールが適用されますか。

ルーティング・プロファイルで選択したモデルのオンデマンド・データ処理ルールが適用されます。プロファイルは、選択したターゲットOCIリージョンのいずれかにリクエストをルーティングします。外部プロバイダをコールするモデルの場合は、そのモデルの外部コール・ノートと、リクエストを処理するターゲットOCIリージョンを確認してください。

たとえば、オーストラリア東部(シドニー)から、Japan Central(大阪)を唯一のターゲットOCIリージョンとしてルーティング・プロファイルを作成し、次のいずれかのモデルを選択できます。

サポートされているモデルおよびターゲットOCIリージョンについては、リージョン別のモデルを参照してください。複数のターゲットOCIリージョンを選択した場合は、各リージョンの「外部コール」ノートを確認します。ルーティング手順については、ローカル・モデル処理のないリージョンを参照してください。

格納されたレスポンス、会話、ファイルおよびメモリー

レスポンス、会話、ファイルまたはメモリーを保存するとどうなりますか。

OCIテナンシのコンパートメントにエンタープライズAIエージェント・プロジェクトを作成し、アプリケーションに必要な機能を選択します。レスポンスや会話の保存、ファイルのアップロード、または長期メモリーの有効化を行う機能を使用する場合、アプリケーションのコンテンツを保持することを選択します。OCIは、このコンテンツをプロジェクトの一部として保存し、アプリケーションで取得または再利用できるようにします。

レスポンスおよび会話の保持期間を構成します。Files APIを使用して、アップロードおよび管理するファイルを選択します。長期メモリーを有効にすると、サービスによって会話の情報が保存され、プロジェクト内の将来の対話で使用されます。Creating a Project、Data Retention、Agent Memory、および Files APIを参照してください。

Google GeminiまたはxAI Grokを使用すると、プロジェクトにコンテンツを保存できますか?

OCIプロジェクト機能を使用して、アプリケーションのコンテンツを保存することを選択できます。GoogleおよびxAIとのOracleのデータ保持ゼロ契約は、モデルを呼び出すときにプロバイダが処理するコンテンツを管理します。OCIに保存するために選択したコンテンツは、プロジェクト・データとして管理され、該当するOCIストレージおよび保存設定に従います。

暗号化

トレーニング・データのファインチューニングはどのように保護されますか。

トレーニング・データは、保存中および転送中に暗号化されます。このサービスは、トレーニング・ジョブが完了するとすぐに、ファインチューニング・クラスタからトレーニング・データを削除します。

モデルをファインチューニングするためのトレーニング・データは、デフォルトで、Oracle管理のAES-256暗号化によって、およびオプションでOCI Vaultサービスを介して顧客管理の秘密キーによって、常に二重暗号化されます。データはいつでも削除できます。

Oracleは、移動中のデータをTLS 1.2で暗号化します。