Oracle Object Storage ServiceからFusion Data Intelligenceへのデータのロード
サービス管理者は、Fusion Data Intelligence抽出サービスを使用して、Oracle Object Storage Serviceからデータを取得し、それを使用してデータ拡張を作成できます。
推奨される方法は、Oracle Object Storage Serviceからデータを取得した後に、1つのソース表から1つの拡張を作成することです。拡張が完了すると、Fusion Data Intelligenceはソース表の名前を変更し、同じソースから複数の拡張を作成すると、ソース・ファイルが見つからなかったというメッセージで他のすべての拡張が失敗する可能性があります。
- Fusion Data IntelligenceでOracle Object Storage Serviceへの接続を作成する際に使用するテキスト・ファイルに次の詳細を格納します。
- Oracle Object Storage Serviceで、すべてのデータファイルを配置する必要があるベース・フォルダとしてリモート・ホストExtractファイル・ディレクトリを作成します。このディレクトリの名前をノートにとります。コンソールの使用のフォルダまたはサブフォルダを作成するにはに関する項を参照してください。
- Oracle Cloud Infrastructure Consoleにサインインし、バケットに移動してリージョン、ネームスペースおよびバケット名の詳細を取得することで、Oracle Object Storage ServiceのURLを取得します。たとえば、URLは
https://objectstorage.<region>.oraclecloud.com/n/<namespace>/b/<name of the bucket>
形式である必要があります。コンソールの使用のバケットの詳細を表示するにはに関する項を参照してください。 - Oracle Cloud Infrastructure Consoleで「アイデンティティとセキュリティ」、「ユーザー」の順にナビゲートして、ユーザーのOCIDを取得します。「ユーザー」ページで、コネクタで使用されるバケットへのアクセス権を持つユーザーを検索し、OCIDをコピーします。Oracle Cloud Infrastructure Consoleでプロファイル・アイコンをクリックし、「テナンシ」をクリックしてテナンシIDを取得します。「テナンシ情報」で、OCIDをコピーします。テナンシのOCIDとユーザーのOCIDを取得する場所を参照してください。
- Oracle Cloud Infrastructure Consoleからユーザーのフィンガープリントを取得します。ユーザー・ページの「リソース」の「APIキー」に移動し、「APIキーの追加」をクリックします。「APIキーの追加」ダイアログで、「APIキー・ペアの生成」が選択されていることを確認します。「秘密キーのダウンロード」および「公開キーのダウンロード」オプションを使用して、秘密キーと公開キーをダウンロードします。秘密キーのテキスト全体と、実際のキーの前後にコメントをコピーする必要があります。これらのコメントは、"---------------Begin RSA Private Key --------"と"-----------End of RSA Private Key----------"と同じくらい簡単です。ヘッダーおよびフッターのコメントなしで英数字キーのみをコピーしないでください。「APIキーの追加」ダイアログで、「公開キー・ファイルを選択」を選択してファイルをアップロードするか、テキスト・ボックスに貼り付ける場合は「公開キーの貼付け」を選択して「追加」をクリックします。コンソールで公開キーをアップロードした後に表示されるフィンガープリントをコピーします。このように表示されます:
12:34:56:78:90:ab:cd:ef:12:34:56:78:90:ab:cd:ef
。
- Fusion Data Intelligenceで、次の手順を使用してOracle Object Storage接続を作成します。
- Fusion Data Intelligenceコンソールで、「アプリケーション管理」の下の「データ構成」をクリックします。
- 「データ構成」ページで、「接続の管理」をクリックします。
- 「接続の管理」ページで、「作成」をクリックし、「接続」をクリックします。
- 「接続の作成」で、「使用タイプ」で「データ抽出」を選択し、接続タイプとして「Oracle Object Storage Service」を選択します。
- Oracle Object Storage Service接続のダイアログで、「接続タイプ」の「標準」を選択し、次の詳細を入力します:
- 接続名: オブジェクト・ストレージ
- 接続タイプ: 標準
- 通知電子メール: 通知を受信する電子メール・アドレス
- リモート・ホストExtractファイル・ディレクトリ: すべてのデータファイルをOracle Object Storage Serviceに配置する必要があるベース・フォルダの名前
- URL: テキスト・ファイルで書き留めたOracle Object Storage ServiceのURL
- ユーザーID: Oracle Object Storage Serviceの適用可能なバケットにアクセスできるユーザーのOCID
- フィンガープリント: コンソールで公開キーをアップロードした後に表示およびコピーしたフィンガープリント。
12:34:56:78:90:ab:cd:ef:12:34:56:78:90:ab:cd:ef
のようになります。 - テナントID: テキスト・ファイルで書き留めたOracle Infrastructure Cloudコンソールのテナンシ
- 秘密キー: 以前にダウンロードした秘密キーの内容を貼り付けます
- ファイル・タイプ: csv
- CSVデリミタ: データファイルのデリミタ
- データファイルの日付書式は、Oracle Object Storage Serviceソースの日付書式と一致する必要があります。たとえば、ソースでMM/dd/yyyy (01/23/1998)を使用した場合、CSV日付書式で同じ書式を指定する必要があります。「CSVファイルベースのエクストラクタの日付とタイムスタンプの書式設定について」を参照してください。
- データファイルのタイムスタンプ書式は、Oracle Object Storage Serviceソースのタイムスタンプ書式と一致する必要があります。たとえば、ソースでMM/dd/yyyy hh:mm:ss (01/23/1998 12:00:20)を使用した場合、CSVタイムスタンプ書式で同じ書式を指定する必要があります
- 接続の保存時にメタデータがリフレッシュされるように、「メタデータのリフレッシュ」トグルが有効になっていることを確認します。 必要に応じて、後で「接続の管理」ページの「アクション」メニューからメタデータをリフレッシュできます。ノート
メタデータ抽出を実行しないかぎり、Oracle Object Storage Serviceの拡張は作成できません。 - 「保存」の順にクリックします。
- Oracle Object Storage Serviceの場合:
- 次のガイドラインを使用して、バケットにフォルダ構造を作成します。
- バケットのベース・フォルダは、接続で指定された詳細と一致する必要があります。
- ベース・フォルダ内に、各ファイルを必ず独自のフォルダに配置します。
- Data_Store_Nameの接頭辞(フォルダ名と同じ)とターゲット・フォルダのファイルが正確に一致していることを確認します。
コンソールの使用のフォルダまたはサブフォルダを作成するにはに関する項を参照してください。
- ベース・フォルダ内に、データ・ストア・リストのメタデータ・ファイルを作成します。このファイルには、サポートされているデータ・ストアがリストされます。各データ・ストアは、データ拡張で使用される実際のファイル(ASSETSなど)を含むフォルダです。ファイル名とフォルダ名が一致し、データストア、フォルダまたはファイル名に特殊文字(スペースを含む)がないことを確認してください。
- 次のガイドラインを使用して、データ・ストア・フォルダの下に各データファイルのメタデータ・ファイルを作成します。
META_DATASTORES.csvには、次の列が必要です。
- DATA_STORE_NAME - データ・ストア名を識別するための必須列。
- DATA_STORE_LABEL - データ・ストアの説明を識別する非必須列。
ノート
既存のソース接続に新しいデータストアを追加する場合は、META_DATASTORES.csvに古い既存データストアを含むデータストアの完全なリストが含まれていることを確認してください。各フォルダには、次のものが必要です。
- Fusion Data Intelligenceにロードされる実際のデータを含むデータ・ファイル。このファイルには、DATA STORE NAMEの接頭辞が必要です。
- 列のリストのメタデータ・ファイルには、データに関するすべての列情報が含まれます。このファイルには、META_DATASTORES_<DATA_STORE_NAME>_COLの接頭辞が必要です。
- このメタデータの列について、次のことを確認してください。
- 列名がABCの場合、メタデータはABCまたはABCになります。二重引用符は無視されます。
- 列名が"ABC"の場合、メタデータは"ABC"である必要があります。最初の二重引用符は無視されます。
例
このイメージでは、フォルダ名はACTIVITY_TYPESです。したがって、データ・ストア名はACTIVITY_TYPESです。これは、META_DATASTORES.csvファイルから確認できます。この例では、ファイルはACTIVITY_TYPES.xlsxまたはACTIVITY_TYPES.csvという名前です。メタデータ・ファイルはMETA_DATASTORES_ACTIVITY_TYPES_COL.csvである必要があります。
META_DATASTORES_ACTIVITY_TYPES_COL.csvには次の列があります。- DATA_STORE_NAME - これは必須列です。
- COLUMN_NAME - これは必須列です。
- COLUMN_LABEL - これは必須でない列です。
- DATA_TYPE– これは必須列です。
- WIDTH– この列は文字列の長さを識別します。
- PRECISION - この列値は数値データ型である必要があります。
- SCALE - この列値は数値データ型である必要があります。
- KEY_SEQUENCE - これは、主キー定義を識別する必須列です。コンポジット主キーを使用している場合は、列順序番号を値として使用します。
- 次のガイドラインを使用して、バケットにフォルダ構造を作成します。
- Fusion Data Intelligenceの「接続の管理」ページで、Oracle Object Storage Service接続に対して「アクション」を選択し、「接続のテスト」を選択します。
- 接続を削除するには、接続の管理ページで、該当する接続の「アクション」をクリックし、「削除」を選択します。ノート
データ接続を削除する前に、データ接続に関連する機能領域、データ拡張およびカスタム・データ構成を削除してください。削除されたデータ接続からウェアハウスへのデータの更新またはロードはできません。 - 接続が正常に確立されたら、「データ構成」ページに移動し、「データ・ソース」で接続を選択し、「データ拡張」タイルをクリックして、Oracle Object Storage Serviceのデータを使用してデータ拡張を作成します。Oracle Object Storage Serviceデータから該当するソース表を選択します。データの拡張を参照してください。