DBMS_DCATパッケージ

DBMS_DCATパッケージは、Autonomous DatabaseユーザーがOCIデータ・カタログのデータ検出および一元化されたメタデータ管理システムを利用するのに役立つファンクションおよびプロシージャを提供します。

データ・カタログは、データ・レイクのオブジェクト・ストレージ・アセットからメタデータを収集します。収集プロセスによって論理エンティティが作成されます。論理エンティティは、列および関連するデータ型を持つ表と考えることができます。DBMS_DCATプロシージャおよびファンクションは、Autonomous Databaseデータ・カタログに接続し、アセットをデータベースと同期して、保護されたスキーマおよび外部表を作成します。その後、これらの外部表を使用してオブジェクト・ストアを問い合せることで、Autonomous Databaseに格納されているデータと外部データを簡単に結合できます。これにより、管理プロセスが大幅に簡素化されます。複数のOCIサービス(Autonomous Databasesを含む)で共有される単一の集中管理メタデータ・ストアがあります。また、SQLを使用してデータ・カタログの内容を検査でき、これらのデータ・カタログ・エンティティがAutonomous Databaseのスキーマおよび表にどのようにマップされるかを示すAutonomous Databaseディクショナリ・ビューもあります。

データ・カタログのユーザーおよびロール

DBMS_DCATパッケージは、同期されたユーザー/スキーマ、dcat_adminユーザーおよびローカル・ユーザーをサポートします。ユーザーがこのパッケージを使用できるようにするには、dcat_syncロールが必要です。

データ・カタログ・ユーザー

  • 同期されたユーザー/スキーマ

    同期された外部表は、データ・アセット/バケットの組合せに対応するデータベース・スキーマに、またはユーザーが設定したカスタム・プロパティに従って編成されます。同期されたスキーマは、データ・カタログの同期中に自動的に作成/削除されます。CREATE SESSION権限のない非認証ユーザーとして作成されます。同期されたスキーマもprotected句を使用して作成されるため、ローカル・ユーザー(PDB管理者でさえも)は変更できず、同期によってのみ変更できます。

  • ユーザーdcat_admin

    ユーザーdcat_adminはローカル・データベース・ユーザーで、同期を実行し、同期された表に対するREAD権限を他のユーザーまたはロールに付与できます。ユーザーは、CREATE SESSION権限のない非認証ユーザーとして作成されます。

  • ローカル・ユーザー

    外部表を問い合せるデータベース・ユーザーには、ユーザーdcat_adminまたはADMINによって、同期された外部表に対するREAD権限が明示的に付与されている必要があります。デフォルトでは、同期が完了すると、ユーザーdcat_adminおよびADMINのみが同期された外部表にアクセスできます。

データ・カタログ・ロール

  • dcat_sync

    dcat_syncロールには、DBMS_DCATパッケージを使用するために必要なすべての権限があります。APIを使用して同期を実行するには、ユーザーにこのロールが必要です。

必要な資格証明およびIAMポリシー

このトピックでは、Autonomous Databaseユーザーにデータ・カタログの管理およびオブジェクト・ストレージからの読取り権限を付与するために必要なOracle Cloud Infrastructure Identity and Access Management (IAM)ユーザー資格証明およびポリシーについて説明します。

OCI データ・カタログの資格証明およびポリシー要件:

AWS Glueデータカタログの資格証明とポリシー要件

Autonomous DatabaseユーザーにAmazon Web Services (AWS) Glueデータ・カタログへのアクセスおよびS3オブジェクト・ストレージからの読取り権限を付与するには、次のユーザー資格証明およびポリシーが必要です:
  • AWS Glueデータ・カタログにアクセスする権限を持つ資格証明オブジェクトが必要です。資格証明の管理の詳細は、DBMS_CLOUD for Access Managementを参照してください。

    AWS Glue Data Catalogにアクセスするには、glue:GetDatabases、glue:GetTables、glue:GetTableの各権限が必要です。

    また、同期中に、基礎となるS3オブジェクトを指す解決可能なhttps URLを生成するには、権限s3:GetBucketLocationが必要です。
  • Autonomous Databaseがデータ・ファイルを問い合せることができるように、S3に格納されているファイルにアクセスする権限を持つ資格証明オブジェクトが必要です。
  • AWS資格証明がサポートされています。AWS Amazon Resource Name (ARN)の資格証明はサポートされていません。

例: OCIネイティブ認証資格証明オブジェクトの作成

この例では、データ・カタログまたはオブジェクト・ストア資格証明オブジェクトの作成時に使用できるOCIネイティブ認証資格証明を作成します。詳細は、それぞれDBMS_DCAT SET_DATA_CATALOG_CREDENTIALプロシージャおよびDBMS_DCAT SET_OBJECT_STORE_CREDENTIALプロシージャを参照してください。

OCIネイティブ認証では、DBMS_CLOUD.CREATE_CREDENTIALプロシージャにパラメータcredential_nameuser_ocidtenancy_ocidprivate_keyおよびfingerprintが含まれています。このプロシージャの詳細は、DBMS_CLOUD CREATE_CREDENTIALプロシージャを参照してください。

credential_nameは、資格証明オブジェクトの名前です。user_ocidおよびtenancy_ocidパラメータは、それぞれユーザーおよびテナンシのOCIDsに対応します。

private_keyパラメータは、生成された秘密キーをPEM形式で指定します。パスフレーズ付きで作成した秘密キーはサポートされていません。したがって、パスフレーズのないキーを生成する必要があります。パスフレーズなしで秘密キーの作成方法の詳細は、API署名キーの生成方法を参照してください。また、このパラメータに指定する秘密キーには、ヘッダーまたはフッターのないキー自体のみを含める必要があります(例: '-----BEGIN RSA PRIVATE KEY-----'、 '-----END RSA PRIVATE KEY-----'))。

fingerprintパラメータは、コンソールに公開キーをアップロードした後に取得される、またはOpenSSLコマンドを使用して取得される指紋を指定します。指紋の取得の詳細は、公開鍵のアップロード方法および鍵の指紋の取得方法を参照してください。

Once all the necessary information is gathered and the private key is generated, we're ready to run the following CREATE_CREDENTIAL procedure:

BEGIN
  DBMS_CLOUD.CREATE_CREDENTIAL (
    credential_name => 'OCI_NATIVE_CRED',
    user_ocid              => 'ocid1.user.oc1..aaaaaaaatfn77fe3fxux3o5lego7glqjejrzjsqsrs64f4jsjrhbsk5qzndq',
    tenancy_ocid           => 'ocid1.tenancy.oc1..aaaaaaaapwkfqz3upqklvmelbm3j77nn3y7uqmlsod75rea5zmtmbl574ve6a',
    private_key            => 'MIIEogIBAAKCAQEA...t9SH7Zx7a5iV7QZJS5WeFLMUEv+YbYAjnXK+dOnPQtkhOblQwCEY3Hsblj7Xz7o=',
    fingerprint            => '4f:0c:d6:b7:f2:43:3c:08:df:62:e3:b2:27:2e:3c:7a');
END;
/
資格証明オブジェクトを作成すると、dba_credentials表に表示されます:
SELECT owner, credential_name
FROM dba_credentials 
WHERE credential_name LIKE '%NATIVE%';

OWNER CREDENTIAL_NAME
----- ---------------
ADMIN OCI_NATIVE_CRED

例: Autonomous Databaseリソース・プリンシパルの使用

この例では、適切なリソース・メンバーを含む動的グループが作成され、その動的グループにデータ・カタログを管理する権限が付与されてから、その動的グループにオブジェクト・ストレージからの読取り権限を付与されます。

  1. adb-grp-1という名前の動的グループを作成します。OCIDがocid1.autonomousdatabase.oc1.iad.abuwcljr...fjkfeAutonomous Databaseインスタンスを含む一致ルールをリソース・メンバーとしてadb-grp-1に追加します。

    動的グループ一致ルール:

    resource.id = 'ocid1.autonomousdatabase.oc1.iad.abuwcljr...fjkfe'
  2. adb-grp-1動的グループに、mycompartmentコンパートメント内のデータ・カタログ・インスタンスへの完全なアクセス権を付与するポリシーを定義します。

    allow dynamic-group adb-grp-1 to manage data-catalog-family in compartment mycompartment
  3. adb-grp-1 動的グループによるmycompartmentという名前のコンパートメント内の任意のバケットの読取りを許可するポリシーを定義します。
    allow dynamic-group adb-grp-1 to read objects in compartment mycompartment

例: ユーザー主体の使用

この例では、user1はグループadb-adminsのメンバーです。このグループのすべてのメンバーには、mycompartment内のすべてのデータ・カタログを管理し、mycompartmentのオブジェクト・ストアから読み取る権限が付与されます。

  1. adb-adminsのメンバーであるユーザーに、mycompartment内のすべてのデータ・カタログの管理を許可します。
    allow group adb-admins to manage data-catalog-family in compartment mycompartment
  2. adb-adminsのメンバーであるユーザーに、mycompartment内のすべてのバケット内のオブジェクトの読取りを許可します。
    allow group adb-admins to read objects in compartment mycompartment

接続管理サブプログラムの要約

この表は、データ・カタログ接続の作成、問合せおよび削除に使用されるDBMS_DCATパッケージ・プロシージャを示しています。

サブプログラム 説明
SET_DATA_CATALOG_CONNプロシージャ 指定されたデータ・カタログへの接続を作成します。
SET_DATA_CATALOG_CREDENTIALプロシージャ データ・カタログへの特定の接続によって使用されるデータ・カタログ・アクセス資格証明の設定
SET_OBJECT_STORE_CREDENTIALプロシージャ オブジェクト・ストアにアクセスするために指定された一意の接続識別子によって使用される資格証明を設定します
UNSET_DATA_CATALOG_CONNプロシージャ 既存のデータ・カタログ接続の削除

SET_DATA_CATALOG_CREDENTIALプロシージャ

このプロシージャでは、データ・カタログへの特定の接続によって使用されるデータ・カタログ・アクセス資格証明を設定します。

構文

PROCEDURE DBMS_DCAT.SET_DATA_CATALOG_CREDENTIAL(
    credential_name VARCHAR2(128) DEFAULT NULL,
    dcat_con_id     VARCHAR2 DEFAULT NULL
  );

パラメータ

パラメータ 説明

credential_name

(オプション)データ・カタログへのアクセスに使用される資格証明。

dcat_con_id 一意のデータ・カタログ接続識別子。この資格証明は、dcat_con_idで識別される接続に使用されます。デフォルトはNullです。

使用方法

この資格証明には、データ・カタログの管理権限が必要です。データ・カタログ・ポリシーを参照してください。デフォルトはリソース・プリンシパルです。ポリシーおよびロールの構成によるクラウド・リソースへのアクセスを参照してください。

SET_OBJECT_STORE_CREDENTIALプロシージャ

このプロシージャは、オブジェクト・ストアにアクセスするために指定された一意の接続識別子によって使用される資格証明を設定します。オブジェクト・ストアのアクセス資格証明を変更すると、既存の同期表がすべて変更され、新しい資格証明が使用されます。

構文

PROCEDURE DBMS_DCAT.SET_OBJECT_STORE_CREDENTIAL(
    credential_name  VARCHAR2(128),
    dcat_con_id      IN VARCHAR2 DEFAULT NULL
  );

パラメータ

パラメータ 説明

credential_name

オブジェクト・ストアにアクセスするために外部表によって使用される資格証明。

dcat_con_id 一意のデータ・カタログ接続識別子。デフォルト値はNULLです。

SET_DATA_CATALOG_CONNプロシージャ

このプロシージャでは、特定のデータ・カタログへの接続を作成します。メタデータをデータ・カタログと同期するには、接続が必要です。Autonomous Databaseインスタンスは、複数のデータ・カタログ・インスタンスに接続でき、OCIデータ・カタログおよびAWS Glueデータ・カタログへの接続をサポートします。

構文

PROCEDURE DBMS_DCAT.SET_DATA_CATALOG_CONN (
   region       VARCHAR2 DEFAULT NULL,
   endpoint     VARCHAR2 DEFAULT NULL,
   catalog_id   VARCHAR2 DEFAULT NULL,
   dcat_con_id  VARCHAR2 DEFAULT NULL,
   catalog_type VARCHAR2 DEFAULT NULL
 );

パラメータ

パラメータ 説明

region

「データ・カタログ」リージョン。endpointが指定されている場合、regionはオプションです。endpointregionの両方が指定されている場合、endpointが優先されます。デフォルトはNULLです。

endpoint

データ・カタログ・エンドポイント。regionが指定されている場合、endpointはオプションです。endpointregionの両方が指定されている場合、endpointが優先されます。デフォルトはNULLです。

catalog_id

データ・カタログ・インスタンスの一意のOracle Cloud Identifier (OCID)。AWS Glueデータ・カタログに接続する場合、catalog_idはオプションです。

dcat_con_id 一意のデータ・カタログ接続識別子。この識別子は、複数のデータ・カタログに接続する場合に必要であり、1つのみに接続する場合はオプションです。これは、後続のコールまたはビューの問合せ時にデータ・カタログ接続を参照するために使用されます。識別子が指定されていない場合、このプロシージャはNULL接続識別子を生成します。dcat_con_idには、次の制限が適用されます。
  • Autonomous Databaseインスタンス内で一意である必要があります。
  • 文字で始める必要があります。
  • 英数字、アンダースコア(_)、ドル記号($)およびポンド記号(#)を含めることができます。
  • 16文字以上である必要があります。
catalog_type 接続するデータ・カタログのタイプ。使用可能な値:
  • OCI_DCAT - OCIデータ・カタログ
  • AWS_GLUE - AWS Glueデータ・カタログ
  • NULL - カタログ・タイプは、指定されたリージョンまたはエンドポイントから自動的に検出されます。

使用方法

このプロシージャをコールする必要があるのは、接続を設定する場合のみです。接続プロセスの一部として、Autonomous Databaseはカスタム・プロパティをデータ・カタログに追加します。データ・カタログ・ユーザーはこれらのカスタム・プロパティにアクセスでき、(スキーマ、表および列の)デフォルト名および列のデータ型をオーバーライドできます。

接続を作成する前に、資格証明を作成して設定する必要があります。接続プロセスの詳細は、OCIデータ・カタログデータ・カタログを使用した一般的なワークフローおよびAWS Glueデータ・カタログAWS Glueデータ・カタログを使用した問合せのユーザー・ワークフローを参照してください。

例: 既知のOCIDへの接続

この例では、Autonomous Databaseuk-london-1リージョンのデータ・カタログに接続していますcatalog_idパラメータは、データ・カタログ・インスタンスにOracle Cloud Identifier (ocid)を使用します。データ・カタログのタイプ(AWS Glue データ・カタログまたはOCI データ・カタログ)が自動的に決定されます。

BEGIN
  DBMS_DCAT.SET_DATA_CATALOG_CONN(
    region=>'uk-london-1',
    catalog_id=>'ocid1.datacatalog.oc1.uk-london-1...');
END;
/

例: AWS Glueデータ・カタログへの接続

接続とは、Autonomous DatabaseインスタンスとAWS Glueデータ・カタログの間の関連付けです。接続に成功すると、Autonomous DatabaseインスタンスはAWS Glueと同期できます。各AWSアカウントには、リージョンごとに1つのAWS Glueデータ・カタログがあり、各カタログには、各リージョンに対応するサービス・エンドポイントを使用してアクセスできます。Autonomous DatabaseインスタンスをAWS Glueデータ・カタログに関連付けるには、API DBMS_DCAT.SET_DATA_CATALOG_CONNを起動し、カタログが存在するリージョンのエンドポイントを指定します。

AWS Glueエンドポイントおよび割当て制限を参照してください。

この例では、Autonomous Databaseuk-london-1リージョンのAWS Glueデータ・カタログに接続していますこれはAWS Glueのデータ・カタログ接続であるため、catalog_idパラメータは必要ありません。

BEGIN
  DBMS_DCAT.SET_DATA_CATALOG_CONN(
    region=>'uk-london-1',
    catalog_type=>'AWS_GLUE'
END;
/

UNSET_DATA_CATALOG_CONNプロシージャ

このプロシージャでは、既存のデータ・カタログ接続を削除します。

構文

ノート

このプロシージャを起動すると、以前の同期の一部として作成されたすべての保護スキーマおよび外部表が削除されます。データ・カタログのメタデータには影響しません。
PROCEDURE DBMS_DCAT.UNSET_DATA_CATALOG_CONN (
    dcat_con_id IN VARCHAR2 DEFAULT NULL
);

パラメータ

パラメータ 説明
dcat_con_id 一意のデータ・カタログ接続識別子。デフォルトはNullです。

同期サブプログラムの概要

同期の実行、同期ジョブの作成と削除、同期されたスキーマの削除は、次の表に示すプロシージャで実行できます。

ノート

2022年4月4日に、sync_optionおよびgrant_readパラメータがDBMS_DCAT.RUN_SYNCプロシージャに追加されました。その日付より前に作成されたスケジュール済同期ジョブの正しいパフォーマンスを確保するために、スケジュール済同期ジョブを削除して再作成する必要があります。DBMS_DCAT.DROP_SYNC_JOBプロシージャおよびDBMS_DCAT.CREATE_SYNC_JOBプロシージャを参照してください。
サブプログラム 説明
CREATE_SYNC_JOBプロシージャ RUN_SYNCを定期的に起動するスケジューラ・ジョブの作成
DROP_SYNC_JOBプロシージャ 指定された一意の接続識別子の既存の同期ジョブを削除します
DROP_SYNCED_SCHEMASプロシージャ 指定された一意の接続識別子について、以前に同期されたすべてのスキーマを削除します
RUN_SYNCプロシージャ 同期操作の実行

RUN_SYNCプロシージャ

このプロシージャは同期操作を実行し、同期のエントリ・ポイントです。入力として、選択したデータ・カタログ・アセット、フォルダおよびエンティティのリストを取得し、外部表の作成、削除および変更によってそれらをマテリアライズします。

sync_optionパラメータは、RUN_SYNCプロシージャが実行する操作(SYNCDELETEまたはREPLACE)を指定します。この操作は、synced_objectsパラメータの範囲内のエンティティに対して実行されます。

RUN_SYNCプロシージャへのすべてのコールは、USER_LOAD_OPERATIONSビューを問い合せて同期のステータスおよび対応するlog_tableに関する情報を取得するために使用できる一意のoperation_idを返します。DBMS_DCAT$SYNC_LOGビューを問い合せると、現在のユーザーが実行した最後の同期操作のlog_tableに簡単にアクセスできます。詳細は、DBMS_DCAT$SYNC_LOGビューおよびロードのモニタリングとトラブルシューティングを参照してください。

ノート

2022年4月4日に、sync_optionおよびgrant_readパラメータがRUN_SYNCプロシージャに追加されました。その日付より前に作成されたスケジュール済同期ジョブの正しいパフォーマンスを確保するために、スケジュール済同期ジョブを削除して再作成する必要があります。DBMS_DCAT.DROP_SYNC_JOBプロシージャおよびDBMS_DCAT.CREATE_SYNC_JOBプロシージャを参照してください。

パーティション化された論理エンティティまたはグルー表の同期

RUN_SYNCプロシージャは、次の3つすべてに該当する場合に、論理エンティティまたはGlue表ごとにパーティション化された外部表を作成します:

  1. OCIデータ・カタログの論理エンティティまたはGlue表には、1つ以上のパーティション化された属性があります。
  2. OCIデータ・カタログの場合、論理エンティティは接頭辞ベースのファイル名パターンから導出されます。正規表現ベースのパターンから導出されたパーティション論理エンティティはサポートされていません。
  3. OCIデータ・カタログの場合、論理エンティティは、ハイブ・スタイルまたは非ハイブ・フォルダ形式に従ったパーティション・データに基づきます。オブジェクト名を使用した非ハイブ・スタイル形式に従ったパーティション・データに基づく論理エンティティはサポートされていません。
    • 例1接頭辞ベースのファイル名パターンを持つHiveスタイル・パーティション化形式に従った、収集されたオブジェクトに基づく論理エンティティ。

      次のオブジェクトを考えます:
      Bucket: MYBUCKET
      cluster1/db1.db/sales/country=USA/year=2020/month=01/sales1.csv
      cluster1/db1.db/sales/country=USA/year=2020/month=01/sales2.csv
      cluster1/db1.db/sales/country=USA/year=2020/month=02/sales1.csv

      開始フォルダ接頭辞がcluster1/db1.dbのファイル名パターンを使用してバケットを収集すると、countryyearおよびmonthの3つのパーティション属性を持つSALESという名前の論理エンティティが生成されます。パーティション化属性のタイプはPartitionであり、一方非パーティション属性のタイプはPrimitiveです。

    • 例2接頭辞ベースのファイル名パターンを持つ非Hiveスタイルのパーティション・フォーマットに従った、収集されたオブジェクトに基づく論理エンティティ。
      次のオブジェクトを考えます:
      Bucket: MYBUCKET
      cluster2/db2.db/sales/USA/2020/01/sales1.csv
      cluster2/db2.db/sales/USA/2020/01/sales2.csv
      cluster2/db2.db/sales/USA/2020/02/sales1.csv

      開始フォルダ接頭辞がcluster2/db2.dbのファイル名パターンを使用してバケットを収集すると、name0、name1およびname2の3つのパーティション属性を持つSALESという名前の論理エンティティが生成されます。生成された論理エンティティの例1との唯一の違いは、パーティション化された属性の名前が自動生成されている点であり、例1ではURL (それぞれcountryyearおよびmonth)から抽出されています。

パーティション化された論理エンティティの同期の完全なエンドツーエンドの例は、例: パーティション化されたデータのシナリオを参照してください。

パーティション化された論理エンティティ/グルー表の増分同期

RUN_SYNCプロシージャへのすべてのコールで、データベースと同期するOCIデータ・カタログ論理エンティティまたはAWS Glue表のセットを指定します。2つのRUN_SYNCコールに論理エンティティ表またはGlue表が存在する場合、2つ目のコールでは既存の外部表が保持され、変更される可能性があります。次の表に、論理エンティティまたはGlue表がパーティション化されている場合にサポートされる論理エンティティまたはGlue表の変更を示します:

論理エンティティまたはグルー表の変更 アクション

パーティションの追加、削除または更新

データ・カタログで変更が検出されているかどうかに関係なく、外部パーティション表のすべてのパーティションが更新されます。

パーティション属性の追加

外部パーティション表へのパーティション列の追加はサポートされていません。例外が発生します。

パーティション属性の削除

外部パーティション表からのパーティション列の削除はサポートされていません。例外が発生します。

パーティション化された属性の名前変更

外部パーティション表のパーティション列名の変更はサポートされていません。例外が発生します。

構文

PROCEDURE DBMS_DCAT.RUN_SYNC (
    synced_objects   IN  CLOB,
    sync_option      IN VARCHAR2 DEFAULT 'SYNC',
    error_semantics  IN VARCHAR2 DEFAULT 'SKIP_ERRORS',
    log_level        IN VARCHAR2 DEFAULT 'INFO',
    grant_read       IN VARCHAR2 DEFAULT NULL,
    dcat_con_id      IN VARCHAR2 DEFAULT NULL
 );
PROCEDURE DBMS_DCAT.RUN_SYNC (
    synced_objects   IN  CLOB,
    sync_option      IN VARCHAR2 DEFAULT 'SYNC',
    error_semantics  IN VARCHAR2 DEFAULT 'SKIP_ERRORS',
    log_level        IN VARCHAR2 DEFAULT 'INFO',
    grant_read       IN VARCHAR2 DEFAULT NULL,
    operation_id     OUT NOCOPY NUMBER,
    dcat_con_id      IN VARCHAR2 DEFAULT NULL
 );

パラメータ

パラメータ 説明

synced_objects

このパラメータは、同期するデータ・カタログ・オブジェクトを指定するJSONドキュメントです。

OCIデータ・カタログの場合、JSONドキュメントでは、複数の粒度(データ・アセット、フォルダ(オブジェクト・ストア・バケット)または論理エンティティでエンティティのセットを指定します。これには、アセット・オブジェクトの配列、または「カタログ内のすべての(オブジェクト・ストアの)データ・アセットの同期」を表す単一の「*」文字列を含む配列のいずれかであるasset_listが含まれます。

AWS Glueデータ・カタログの場合、JSONドキュメントでは、複数の粒度の表のリスト(データベース、表)を指定します。ドキュメントはデータベースのリストを指定します。ユーザーは、データベース内の個々の表を指定することで、同期する表のセットを制限できます。

sync_option (オプション)次の3つのオプションがあります:
  • SYNC (デフォルト) - このオプションにより、synced_objectsスコープのデータ・カタログ内の内容がAutonomous Databaseに表示されることが保証されます。論理エンティティまたはGlue表がデータ・カタログから削除された場合は、最後の同期操作以降、Autonomous Databaseで削除されます。synced_objectsスコープに対して次の操作が実行されます:
    • 新規データ・カタログ・エンティティの表を追加します
    • 削除されたデータ・カタログ・エンティティの表を削除します
    • 名前、列、データ型などの既存の表のプロパティを更新します
  • DELETE - synced_objectsスコープ内の表を削除します。
  • REPLACE - 現在同期されているすべてのオブジェクトをsynced_objectsスコープ内のオブジェクトに置き換えます。

error_semantics

(オプション)このパラメータは、エラー動作を指定します。SKIP_ERRORSに設定すると、個々のエンティティでエラーが発生しても同期は続行されます。STOP_ON_ERRORに設定すると、最初に発生したエラーでプロシージャが失敗します。デフォルトはSKIP_ERRORSです。

log_level

(オプション)このパラメータは、ロギング詳細レベルの高い順に次の値を指定します: (OFFFATALERRORWARNINFODEBUGTRACEALL)。デフォルトはINFOです。
grant_read (オプション)このパラメータは、このRUN_SYNCの起動によって処理されたすべての外部表に対するREAD権限が自動的に付与されるユーザー/ロールのリストです。grant_readリストのすべてのユーザー/ロールには、synced_objectsパラメータで指定されたエンティティに対応する新規または既存のすべての外部表に対するREAD権限が付与されます。RUN_SYNCプロシージャでは、同期された外部表に対してすでに付与されている権限が保持されます。

operation_id

(オプション)このパラメータを使用して、同期に対応するエントリをUSER_LOAD_OPERATIONSで検索し、ログ表の名前を決定します。

ノート: operation_idを返さないバージョンのRUN_SYNCを使用できるため、ユーザーはUSER_LOAD_OPERATIONSに最新の同期を問い合せることができます。

dcat_con_id このパラメータは、データ・カタログへの接続の作成時に指定された一意のデータ・カタログ接続識別子です。DBMS_DCAT SET_DATA_CATALOG_CONNプロシージャを参照してください。このパラメータは、同期に使用される接続を識別し、導出スキーマ名の一部になります。スキーマ名の導出方法の詳細は、「同期マッピング」を参照してください。パラメータのデフォルトはNULLです。

例: すべてのOCI データ・カタログ・エンティティの同期

次の例では、すべてのデータ・カタログ・エンティティが同期されます。

EXEC DBMS_DCAT.RUN_SYNC(synced_objects=>'{"asset_list":["*"]}');

例: すべてのOCIデータ・カタログ・データ・アセットを同期するためのsynced_objectsパラメータ

次の例は、データ・カタログ内のすべての(オブジェクト・ストレージの)データ・アセットを同期するためのsynced_objectsパラメータです。

{"asset_list" : ["*"]}

例: 特定のOCIデータ・カタログ・データ・アセットを同期するためのsynced_objectsパラメータ

次の例は、2つのデータ・アセットを同期するためのsynced_objectsパラメータです。

{"asset_list": [
        {
            "asset_id":"0b320de9-8411-4448-91fb-9e2e7f78fd5f"
        },
        {
            "asset_id":"0b320de9-8411-4448-91fb-9e2e7f74523"
        }
    ]}

例: データ・アセット内の特定のOCIデータ・カタログ・エンティティを同期するためのsynced_objectsパラメータ

次に、データ・アセット内の2つのエンティティを同期するためのsynced_objectsパラメータの例を示します。

{"asset_list": [
        {
            "asset_id":"0b320de9-8411-4448-91fb-9e2e7f78fd5f",
            "folder_list":[
                "f1",         
                "f2" 
           ]
        }   
    ]}

例: データ・アセット内の特定のOCIデータ・カタログ・フォルダおよびエンティティを同期するためのsynced_objectsパラメータ

次に、データ・アセット内の2つのエンティティを同期するためのsynced_objectsパラメータの例を示します。

{"asset_list":[
        {
            "asset_id":"0b320de9-8411-4448-91fb-9e2e7f78fd5f",
            "entity_list": [
                "entity1",     
                "entity2"
            ],
             "folder_list": [
                "f1",         
                "f2"
            ]
        }   
    ]}

例: すべてのAWS Glueデータ・カタログ・データベースを同期するためのsynced_objectsパラメータ

次に、AWS Glueデータ・カタログのすべてのデータベースを同期するためのsynced_objectsパラメータの例を示します。

{"database_list":["*"]}

例: 2つのAWS Glueデータ・カタログ・データベースを同期するためのsynced_objectsパラメータ

次に、2つのAWS Glueデータ・カタログ・データベースを同期するためのsynced_objectsパラメータの例を示します。

{"database_list":[
    {"database":"tpcdscsv"},
    {"database":"tpcdsparquet"} ]}

例: 3つのAWS Glueデータ・カタログ・データベースを同期するためのsynced_objectsパラメータ

次に、AWS Glueデータ・カタログ・データベースから3つの表を同期するためのsynced_objectsパラメータの例を示します。

{"database_list":[
 {"database":"tpcdsparquet",
     "table_list": [ "tpcdsparquet_customer",
                     "tpcdsparquet_item",
                     "tpcdsparquet_web_sales" ] } ]}

CREATE_SYNC_JOBプロシージャ

このプロシージャは、定期的にRUN_SYNCを起動するスケジューラ・ジョブを作成します。

同期するオブジェクトのセット、エラー・セマンティクス、ログ・レベルおよび繰返し間隔を入力として取得します。同期の動作の詳細は、DBMS_DCAT RUN_SYNCプロシージャを参照してください。

同期ジョブは1つのみ存在できます。強制パラメータがTRUEに設定されていないかぎり、別のジョブがすでに指定されていると、CREATE_SYNC_JOBプロシージャは失敗します。強制をTRUEに設定すると、前のジョブが削除されます。

別の同期の進行中にスケジューラ・ジョブを実行しようとすると、スケジューラ・ジョブは失敗します。

ノート

2022年4月4日に、sync_optionおよびgrant_readパラメータがRUN_SYNCプロシージャに追加されました。その日付より前に作成されたスケジュール済同期ジョブの正しいパフォーマンスを確保するために、スケジュール済同期ジョブを削除して再作成する必要があります。DBMS_DCAT.DROP_SYNC_JOBプロシージャおよびDBMS_DCAT.CREATE_SYNC_JOBプロシージャを参照してください。

構文

PROCEDURE DBMS_DCAT.CREATE_SYNC_JOB (
    synced_objects   IN CLOB,
    error_semantics  IN VARCHAR2 DEFAULT 'SKIP_ERRORS',
    log_level        IN VARCHAR2 DEFAULT 'INFO',
    repeat_interval  IN VARCHAR2,
    force            IN VARCHAR2 DEFAULT 'FALSE',
    grant_read       IN VARCHAR2 DEFAULT NULL,
    sync_option      IN VARCHAR2 DEFAULT 'SYNC',
    dcat_con_id      IN VARCHAR2 DEFAULT NULL
);

パラメータ

パラメータ 説明

synced_objects

RUN_SYNCプロシージャで説明されているように、同期するオブジェクトを指定するJSONオブジェクト。

error_semantics

(オプション)RUN_SYNCに指定されているエラー動作。デフォルトはSKIP_ERRORSです。

log_level

(オプション) RUN_SYNCに指定されているロギング・レベル。デフォルトはINFOです。

repeat_interval

DBMS_SCHEDULER.CREATE_JOBプロシージャの繰返し間隔パラメータと同じセマンティクスを使用したジョブの繰返し間隔。repeat_intervalの詳細は、ジョブ作成の概要を参照してください。

force

(オプション) TRUEの場合、既存の同期ジョブが最初に削除されます。FALSEの場合、同期ジョブが存在すると、CREATE_SYNC_JOBプロシージャは失敗します。デフォルトはFALSEです。

grant_read (オプション)プロシージャRUN_SYNCで説明されているように、同期された外部表でREADを付与されるユーザー/ロールのリスト。DBMS_DCAT.RUN_SYNCプロシージャを参照してください。
sync_option (オプション)前のRUN_SYNC操作によってすでに同期されているエンティティに対する動作(プロシージャRUN_SYNCの説明を参照)。DBMS_DCAT.RUN_SYNCプロシージャを参照してください。
dcat_con_id このパラメータは、データ・カタログへの接続の作成時に指定された一意のデータ・カタログ接続識別子です。DBMS_DCAT SET_DATA_CATALOG_CONNプロシージャを参照してください。このパラメータは、同期に使用される接続を識別し、導出スキーマ名の一部になります。スキーマ名の導出方法の詳細は、「同期マッピング」を参照してください。パラメータのデフォルトはNULLです。

DROP_SYNC_JOBプロシージャ

このプロシージャは、指定された一意の接続識別子の既存の同期ジョブを削除します。

構文

PROCEDURE DBMS_DCAT.DROP_SYNC_JOB (
    dcat_con_id IN VARCHAR2 DEFAULT NULL
  );

パラメータ

パラメータ 説明
dcat_con_id 一意のデータ・カタログ接続識別子。デフォルト値はNULLです。

DROP_SYNCED_SCHEMASプロシージャ

このプロシージャは、指定された一意の接続識別子について、以前に同期されたスキーマをすべて削除します。

構文

PROCEDURE DBMS_DCAT.DROP_SYNCED_SCHEMAS (
    dcat_con_id IN VARCHAR2 DEFAULT NULL
  );

パラメータ

パラメータ 説明
dcat_con_id 一意のデータ・カタログ接続識別子。デフォルト値はNULLです。

データ・カタログ・ビューの概要

データ・カタログAutonomous Databaseと統合すると、多数の表およびビューが提供されます。

次の表およびビューは、次のことを理解するのに役立ちます:

  • 使用可能なデータ・カタログ・アセット。データベース、オブジェクト・ストアなど、あらゆるタイプのデータ・カタログ・アセットに関する情報を取得します。
  • Autonomous Databaseと同期されたデータ・カタログのオブジェクト・ストレージ・アセットおよびエンティティに関する情報。これには、Autonomous Databaseオブジェクト(スキーマおよび外部表など)にデータ・カタログ・アイテム(アセット、フォルダおよびエンティティ)をマップする方法について説明します。
  • メタデータ同期実行。同期中にエラーが発生しました。

この表は、DBMS_DCATパッケージによって提供される表およびビューを示しています。

表示 説明
ALL_CLOUD_CATALOG_DATABASESビュー OCI データ・カタログ・データ・アセットおよびAWS Glue データ・カタログ・データベースに関する情報の表示
ALL_CLOUD_CATALOG_TABLESビュー OCIデータ・カタログのデータ・エンティティ、およびAWS Glueデータ・カタログの表に関する情報を表示するために使用されます
ALL_DCAT_ASSETSビュー このデータベースにアクセス権限があるデータ・カタログ・アセットをリストします
ALL_DCAT_ATTRIBUTESビュー このデータベースにアクセス権限があるデータ・カタログ属性をリストします
ALL_DCAT_CONNECTIONSビュー このインスタンスに接続されているデータ・カタログに関する情報を含むビュー
ALL_DCAT_ENTITIESビュー

このデータベースにアクセスする権限がある論理エンティティをリストします

ALL_DCAT_FOLDERSビュー 論理エンティティのデータ・ファイルを含むオブジェクト・ストレージ・バケットのメタデータをリストします
ALL_DCAT_GLOBAL_ACCESSIBLE_CATALOGSビュー すべてのリージョンにわたってアクセス可能なすべてのカタログを、各カタログに対するアクセス権限のレベルとともにリストします。
ALL_DCAT_LOCAL_ACCESSIBLE_CATALOGSビュー 現在のリージョン内のアクセス可能なすべてのカタログを、各カタログのアクセス権限レベルとともにリストします。
ALL_GLUE_DATABASESビュー データ・カタログ資格証明がアクセスを許可されているAWS Glueデータ・カタログ・データベースをリストします
ALL_GLUE_TABLESビュー データ・カタログ資格証明がアクセスを許可されているすべてのAWS Glueデータ・カタログ表を表示します
DCAT_ATTRIBUTESビュー 論理エンティティ属性の外部表の列へのマッピングのリスト
DCAT_ENTITIESビュー 外部表への論理エンティティのマッピングについて説明します
DBMS_DCAT$SYNC_LOGビュー 現在のユーザーが実行した最後の同期操作のログ表への簡単なアクセスを提供します。

ALL_CLOUD_CATALOG_DATABASESビュー

ビューALL_CLOUD_CATALOG_DATABASESを使用して、OCIデータ・カタログ・データ・アセットおよびAWS Glueデータ・カタログ・データベースに関する情報を表示します。

説明
DCAT_CON_ID CON1
CATALOG_ID データ・カタログの一意の識別子。

OCIデータ・カタログの例:

ocid1.datacatalog.oc1.ap-mumbai-1.….y35a

AWS Glueデータ・カタログの例:

NULL

579294766787

NAME データ・アセット(OCI)/データベースの名前(AWS Glue)。

OCIデータ・カタログの例:

OBJECT_STORE_AT_ASHBURN

AWS Glueデータ・カタログの例:

OBJECT_STORE_AT_N_CALIFORNIA

DESCRIPTION データ・アセット(OCI)/データベース(AWS Glue)の説明。

OCIデータ・カタログの例:

Data stored in S3 (N. California)

AWS Glueデータ・カタログの例:

Data stored in S3 (N. California)
TIME_CREATED データ・アセット(OCI)/データベース(AWS Glue)がデータ・カタログに作成された日時。

OCIデータ・カタログの例:

26-SEP-22 10.56.01.395000 PM +00:00

AWS Glueデータ・カタログの例:

2022-06-15T09:45:35+01:00

DETAILS 各データ・エンティティ(OCI)/データベース(AWS Glue)に関するメタデータを含むJSONドキュメント。

OCIデータ・カタログの例:

{
  "catalog-id": "ocid1.datacatalog.oc1.ap-mumbai-1.amaaa...",
  "description": null,
  "display-name": "OBJECT_STORE_AT_ASHBURN",
  "external-key": "https://swiftobjectstorage.us-ashburn-1....",
  "key": "bc95181c-3ac3-4959-9e5f-4e460d3fb82a",
  "lifecycle-state": "ACTIVE",
  "time-created": "2022-09-26T22:56:01.395000+00:00",
  "type-key": "3ea65bc5-f60d-477a-a591-f063665339f9",
  "uri": "/dcat/20190325/dataAssets/bc95181c-3ac3-4959-9e5f-4e460d3fb82a"
}

AWS Glueデータ・カタログの例:

{
    "Name": "dbmsdcatpoc",
    "Parameters": {
        "somekey": "somevalue"
    },
    "CreateTime": "2022-06-15T09:45:35+01:00",
    "CreateTableDefaultPermissions": [
        {
            "Principal": {
                "DataLakePrincipalIdentifier": "IAM_ALLOWED_PRINCIPALS"
            },
            "Permissions": [
                "ALL"
            ]
        }
    ],
    "CatalogId": "579294766787"
}

ALL_CLOUD_CATALOG_TABLESビュー

ビューALL_CLOUD_CATALOG_TABLESは、OCIデータ・カタログのデータ・エンティティおよびAWS Glueデータ・カタログの表に関する情報を表示するために使用します。

説明
DCAT_CON_ID データ・カタログの一意の識別子。接続IDです。

OCIデータ・カタログの例: CON1

AWS Glueデータ・カタログの例: CON1

CATALOG_ID データ・カタログの一意の識別子。

OCIデータ・カタログの例: ocid1.datacatalog.oc1.ap-mumbai-1.....y35a

AWS Glueデータ・カタログの例: NULL

579294766787

DATABASE_NAME データ・アセット(OCI)/データベースの名前(AWS Glue)。

OCIデータ・カタログの例: OBJECT_STORE_AT_ASHBURN

AWS Glueデータ・カタログの例: OBJECT_STORE_AT_N_CALIFORNIA

NAME データ・エンティティ(OCI)/表の名前(AWS Glue)。

OCIデータ・カタログの例: BIKES_TRIPS

AWS Glueデータ・カタログの例: BIKES_TRIPS

DESCRIPTION データ・エンティティ(OCI)/表(AWS Glue)の説明。

OCIデータ・カタログの例: Table storing bike trips

AWS Glueデータ・カタログの例: Table storing bike trips

TIME_CREATED データ・エンティティ(OCI)/表(AWS Glue)がデータ・カタログに作成された日時。

OCIデータ・カタログの例: 26-SEP-22 10.56.01.395000 PM +00:00

AWS Glueデータ・カタログの例: 2022-06-15T09:45:35+01:00

TIME_UPDATED 前回、データ・エンティティ(OCI)/表(AWS Glue)が変更されたとき。

OCIデータ・カタログの例: 26-SEP-22 10.56.01.395000 PM +00:00

AWS Glueデータ・カタログの例: 2022-06-15T09:45:35+01:00

DETAILS 各データ・エンティティ(OCI)/表に関するメタデータを含むJSONドキュメント(AWS Glue)

OCIデータ・カタログの例:

{  
  "business-name": null,
  "data-asset-key": "bc95181c-3ac3-4959-9e5f-...",
  "description": null,
  "display-name": "bikes_trips",
  "external-key": "LE: https://swiftobjectstorage.us-ashburn-1.oraclecloud.com/v1/..._trips",
  "folder-key": "9c4b542d-d6eb-4b83-bf59-...",
  "folder-name": "hive",
  "is-logical": true,
  "is-partition": false,
  "key": "fde30a69-a07c-478a-ab62-...",
  "lifecycle-state": "ACTIVE",
  "object-storage-url": "https://objectstorage.us-ashburn-1.oraclecloud.com/n/...",
  "path": "OBJECT_STORE_AT_ASHBURN/hive/hive",
  "pattern-key": "db21b3f1-1508-4045-aa80-...",
  "properties": {
    "default": {
      "CONTENT-LENGTH": "4310321",
      "LAST-MODIFIED": "Fri, 9 Oct 2020 20:16:52 UTC",
      "archivedPECount": "0",
      "dataEntityExpression": "{logicalEntity:[^/]+}.db/{logicalEntity:[^/]+}/.*",
      "harvestedFile": "bikes.db/trips/p_start_month=2019-09/000000_0",
      "patternName": "bikes_trips"
    },
    "harvestProps": {
      "characterset": "UTF8",
      "compression": "none",
      "type": "PARQUET"
    }
  },
  "realized-expression": "bikes.db/trips/.*",
  "time-created": "2022-09-26T22:56:35.063000+00:00",
  "time-updated": "2022-09-26T22:56:35.063000+00:00",
  "type-key": "6753c3af-7f88-44b9-be52-1d57bef462fb",
  "updated-by-id": "ocid1.user.oc1..r5l3tov7a",
  "uri": "/dcat/20190325/dataAssets/bc95181c-3ac3-4959-9e5f-..."
}

AWS Glueデータ・カタログの例:

{
    "Name": "bikes_trips",
    "DatabaseName": "dbmsdcatpoc",
    "Owner": "owner",
    "CreateTime": "2022-06-23T13:24:20+01:00",
    "UpdateTime": "2022-06-23T13:24:20+01:00",
    "LastAccessTime": "2022-06-23T13:24:20+01:00",
    "Retention": 0,
    "StorageDescriptor": {
        "Columns": [
            {
                "Name": "trip_duration",
                "Type": "int"
            },
            {
                "Name": "start_month",
                "Type": "string"
            }, ...
        ],
        "Location": "s3://dbmsdcatpoc/hive/bikes.db/trips/",
        "InputFormat": "org.apache.hadoop.hive.ql.io.parquet.MapredParquetInputFormat",
        "OutputFormat": "org.apache.hadoop.hive.ql.io.parquet.MapredParquetOutputFormat",
        "Compressed": false,
        "NumberOfBuckets": -1,
        "SerdeInfo":
 {            "SerializationLibrary": "org.apache.hadoop.hive.ql.io.parquet.serde.ParquetHiveSerDe",
            "Parameters": {
                "serialization.format": "1"
            }
        },
        "BucketColumns": [],
        "SortColumns": [],
        "Parameters": {
            "CrawlerSchemaDeserializerVersion": "1.0",
            "CrawlerSchemaSerializerVersion": "1.0",
            "UPDATED_BY_CRAWLER": "crawler-bikes",
            "averageRecordSize": "86",
            "classification": "parquet",
            "compressionType": "none",
            "objectCount": "12",
            "recordCount": "404947",
            "sizeKey": "35312159",
            "typeOfData": "file"
        },
        "StoredAsSubDirectories": false
    },
    "PartitionKeys": [
        {
            "Name": "p_start_month",
            "Type": "string"
        }
    ],
    "TableType": "EXTERNAL_TABLE",
    "Parameters": {
        "CrawlerSchemaDeserializerVersion": "1.0",
        "CrawlerSchemaSerializerVersion": "1.0",
        "UPDATED_BY_CRAWLER": "crawler-bikes",
        "averageRecordSize": "86",
        "classification": "parquet",
        "compressionType": "none",
        "objectCount": "12",
        "recordCount": "404947",
        "sizeKey": "35312159",
        "typeOfData": "file"
    },
    "CreatedBy": "arn:aws:sts::579294766787:assumed-role/AWSGlueServiceRole-dbmsdcat/AWS-Crawler",
    "IsRegisteredWithLakeFormation": false,
    "CatalogId": "579294766787",
    "VersionId": "0"
}

ALL_DCAT_ASSETSビュー

このデータベースにアクセス権限があるデータ・カタログ・アセット。

Datatype 説明
DCAT_CON_ID VARCHAR2 (4000) インスタンス内で一意の接続識別子

KEY

VARCHAR2(4000)

資産キー

DISPLAY_NAME VARCHAR2(4000) アセット表示名
DESCRIPTION VARCHAR2(4000) アセットの説明
CATALOG_ID VARCHAR2(4000) アセットを含むデータ・カタログのOCID
EXTERNAL_KEY VARCHAR2(4000) アセットのベース・オブジェクト・ストレージURI。
URI VARCHAR2(4000) データ・カタログAPIのアセットURI
TIME_CREATED TIMESTAMP(6) WITH TIMEZONE データ・アセットの作成日時
TYPE_KEY VARCHAR2(4000) データ・アセット・タイプのキー(現在は、オブジェクト・ストレージ・データ・アセットのみがサポートされています)。タイプ・キーは、'/types'データ・カタログ・エンドポイントを介して検索できます。
LIFECYCLE_STATE VARCHAR2(4000) データ・アセットの現在の状態。考えられるライフサイクル状態の詳細は、データ・カタログDataAssetリファレンスlifecycleStateの可能性のある状態のリストを参照してください。

ALL_DCAT_ATTRIBUTESビュー

このデータベースにアクセス権限があるデータ・カタログ属性。

Datatype 説明
DCAT_CON_ID VARCHAR2 (4000) インスタンス内で一意の接続識別子
KEY NUMBER 属性キー

DISPLAY_NAME

VARCHAR2(4000)

属性の表示名

BUSINESS_NAME VARCHAR2(4000) 属性ビジネス名
DESCRIPTION VARCHAR2(4000) 属性の説明
DATA_ASSET_KEY VARCHAR2(4000) データ・アセット・キー
FOLDER_KEY VARCHAR2(4000) フォルダ・キー
ENTITY_KEY VARCHAR2(4000) エンティティ・キー
EXTERNAL_KEY VARCHAR2(4000) 属性の一意の外部キー
LENGTH NUMBER 属性値の最大許容長
PRECISION NUMBER 属性値の精度(通常はfloatデータ型に適用されます)
SCALE NUMBER 属性値のスケール(通常はfloatデータ型に適用されます)
IS_NULLABLE NUMBER この属性にNULL値を割り当てることができるかどうかを識別します
URI VARCHAR2(4000) データ・カタログAPIの属性インスタンスへのURI
LIFECYCLE_STATE VARCHAR2(4000) 属性の現在の状態。考えられるライフサイクル状態の詳細は、データ・カタログ属性リファレンスlifecycleStateの可能性のある状態のリストを参照してください。
TIME_CREATED TIMESTAMP(6) WITH TIME ZONE 属性が作成された日時
EXTERNAL_DATA_TYPE VARCHAR2(4000) 外部システムで定義されている属性のデータ型
MIN_COLLECTION_COUNT NUMBER 属性のタイプがコレクション・タイプの場合の要素の最小数
MAX_COLLECTION_COUNT NUMBER 属性のタイプがコレクション・タイプの場合の要素の最大数
DATATYPE_ENTITY_KEY VARCHAR2(4000) この属性のデータ型を表すエンティティ・キー(この属性が複合タイプの場合に適用可能)
EXTERNAL_DATATYPE_ENTITY_KEY VARCHAR2(4000) この属性のデータ型を表す外部エンティティ・キー(この属性が複合タイプの場合に適用可能)
PARENT_ATTRIBUTE_KEY VARCHAR2(4000) この属性の親属性を表す属性キー(親属性が複合データ・タイプの場合に適用可能)
EXTERNAL_PARENT_ATTRIBUTE_KEY VARCHAR2(4000) この属性の親属性を表す外部属性キー。親属性が複合タイプの場合に適用可能
PATH VARCHAR2(4000) 属性のフルパス

ALL_DCAT_CONNECTIONSビュー

このインスタンスに接続されているデータ・カタログに関する情報を含むビュー。

Datatype 説明
DCAT_CON_ID VARCHAR2(4000) インスタンス内で一意の接続識別子
COMPARTMENT_ID VARCHAR2(4000) データ・カタログ・インスタンスが存在するコンパートメントのOCID
INSTANCE_ID VARCHAR2(4000)

データ・カタログ・インスタンスのOCID

REGION

VARCHAR2(4000)

データ・カタログ・インスタンスのリージョン

ENDPOINT VARCHAR2(4000) データ・カタログ・インスタンスのエンドポイント
CREATED TIMESTAMP データ・カタログ・インスタンスが作成されたとき
NAME VARCHAR2(4000) データ・カタログ・インスタンスの名前
LAST_UPDATED TIMESTAMP データ・カタログ・インスタンスへの接続の最終更新のタイムスタンプ
LATEST_OPERATION_ID NUMBER 最後の同期操作のID
DATA_CATALOG_CREDENTIAL VARCHAR2(128) データ・カタログへのアクセスに使用される資格証明
OBJECT_STORE_CREDENTIAL VARCHAR2(128) オブジェクト・ストアにアクセスするために外部表ドライバによって使用される資格証明

ALL_DCAT_ENTITIESビュー

このデータベースにアクセス権限があるデータ・カタログ論理エンティティ。

Datatype 説明
DCAT_CON_ID VARCHAR2(4000) インスタンス内で一意の接続識別子
CATALOG_ID VARCHAR2(4000) アセットを含むデータ・カタログのOCID

KEY

VARCHAR2(4000)

エンティティ・キー

DISPLAY_NAME VARCHAR2(4000)

エンティティ表示名

BUSINESS_NAME VARCHAR2(4000)

エンティティ・ビジネス名

DESCRIPTION VARCHAR2(4000)

論理エンティティの説明

DATA_ASSET_KEY

VARCHAR2(4000)

資産キー

FOLDER_KEY

VARCHAR2(4000)

フォルダ一意キー

FOLDER_NAME VARCHAR2(4000) フォルダ名(バケット)
EXTERNAL_KEY VARCHAR2(4000) 論理エンティティの外部キー
PATTERN_KEY VARCHAR2(4000) 論理エンティティの関連パターンのキー
REALIZED_EXPRESSION VARCHAR2(4000) この論理エンティティのファイルの取得に使用される正規表現
PATH VARCHAR2(4000) 論理エンティティのフルパス
TIME_CREATED TIMESTAMP(6) WITH TIME ZONE エンティティが作成された日時
TIME_UPDATED TIMESTAMP(6) WITH TIME ZONE データ・エンティティが最後に変更された時刻
UPDATED_BY_ID VARCHAR2(4000) データ・カタログでこのオブジェクトを更新したユーザーのOCID
URI VARCHAR2(4000) API内のエンティティ・インスタンスのURI
LIFECYCLE_STATE VARCHAR2(4000) エンティティの現在の状態。考えられるライフサイクル状態の詳細は、データ・カタログエンティティ・リファレンスlifecycleStateの考えられる状態のリストを参照してください。

ALL_DCAT_FOLDERSビュー

論理エンティティのデータ・ファイルを含むオブジェクト・ストレージ・バケットのメタデータ。

Datatype 説明
DCAT_CON_ID VARCHAR2(4000) インスタンス内で一意の接続識別子
CATALOG_ID VARCHAR2(4000) アセットを含むデータ・カタログのOCID

KEY

VARCHAR2(4000)

フォルダ・キー

DISPLAY_NAME

VARCHAR2(4000)

フォルダ表示名

BUSINESS_NAME VARCHAR2(4000) フォルダ・ビジネス名
DESCRIPTION VARCHAR2(4000) フォルダの説明
DATA_ASSET_KEY VARCHAR2(4000) フォルダを含むデータ・アセットのキー
PARENT_FOLDER_KEY VARCHAR2(4000) 親フォルダのキー(現在、これはデータ・アセット・キーです)
PATH VARCHAR2(4000) フォルダのフルパス
EXTERNAL_KEY VARCHAR2(4000) バケットのオブジェクト・ストレージURI
TIME_EXTERNAL TIMESTAMP(6) WITH TIMEZONE このフォルダの最終変更タイムスタンプ
TIME_CREATED TIMESTAMP(6) WITH TIMEZONE フォルダの作成日時
URI VARCHAR2(4000) データ・カタログAPIのフォルダ・インスタンスへのURI。
LIFECYCLE_STATE VARCHAR2(4000) フォルダの現在の状態。考えられるライフサイクル状態の詳細は、データ・カタログフォルダ・リファレンスlifecycleStateの考えられる状態のリストを参照してください。

ALL_DCAT_GLOBAL_ACCESSIBLE_CATALOGSビュー

このビューには、すべてのリージョンにわたってアクセス可能なすべてのカタログが、各カタログに対するアクセス権限のレベルとともにリストされます。

Datatype 説明

CATALOG_ID

VARCHAR2(4000)

カタログOCID

CATALOG_NAME VARCHAR2(4000) カタログの名前
CATALOG_REGION VARCHAR2(4000) カタログ・リージョンの名前
CATALOG_SCORE NUMBER カタログ・スコアは、データ・カタログ・アクセス資格証明に構成された権限から計算された数値です。カタログ・スコアが高いほど権限が高くなります。これは、このカタログがこのAutonomous Databaseインスタンスで使用することを意図している可能性が高いことを意味します。

ALL_DCAT_LOCAL_ACCESSIBLE_CATALOGSビュー

このビューには、現在のリージョン内のアクセス可能なすべてのカタログが、各カタログのアクセス権限レベルとともにリストされます。

Datatype 説明

CATALOG_ID

VARCHAR2(4000)

カタログOCID

CATALOG_NAME VARCHAR2(4000) カタログの名前
CATALOG_SCORE NUMBER カタログ・スコアは、データ・カタログ・アクセス資格証明に構成された権限から計算された数値です。カタログ・スコアが高いほど権限が高くなります。これは、このカタログがこのAutonomous Databaseインスタンスで使用することを意図している可能性が高いことを意味します。

ALL_GLUE_DATABASESビュー

データ・カタログ資格証明がアクセスを許可されているAWS Glueデータ・カタログ・データベース。

データ型 説明
DCAT_CON_ID VARCHAR2(4000) データ・カタログ接続IDの一意識別子。
CATALOG_ID VARCHAR2(255) データ・カタログの一意の識別子。
NAME VARCHAR2(255) データベースの名前。
DESCRIPTION VARCHAR2(2048) データベースの説明。
LOCATION_URI VARCHAR2(1024) データベースの場所。
CREATE_TIME TIMESTAMP データベースがデータ・カタログに作成された時間。
PARAMETERS CLOB データベースのパラメータおよびプロパティを定義するキーと値のペアを持つJSONドキュメント。
TARGET_DATABASE VARCHAR2(4000) AWSでのリソース・リンクのターゲット・データベースを記述するJSONドキュメント。

ALL_GLUE_TABLESビュー

このビューには、データ・カタログ資格証明がアクセスを許可されているすべてのAWS Glueデータ・カタログ表が表示されます。

データ型 説明
DCAT_CON_ID VARCHAR2(4000) データ・カタログ接続IDの一意識別子。
CATALOG_ID VARCHAR2(255) カタログ識別子
DATABASE_NAME VARCHAR2(255) データベース名
NAME VARCHAR2(255) 表名
TABLE_TYPE VARCHAR2(255) 表タイプ
CLASSIFICATION VARCHAR2(255)  
DESCRIPTION VARCHAR2(2048) 表の説明
OWNER VARCHAR2(255) 表の所有者
CREATED_BY VARCHAR2(255) テーブル作成者
CREATE_TIME TIMESTAMP 表がデータ・カタログに作成された時間。
LAST_ANALYZED_TIME TIMESTAMP この表の列統計が最後に計算された時刻。
LAST_ACCESS_TIME TIMESTAMP 表に最後にアクセスした時刻。
UPDATE_TIME TIMESTAMP 表の最終更新日。
IS_REGISTERED_WITH_LAKE_FORMATION NUMBER 表がAWSレイク形成に登録されているかどうかを示します。
PARAMETERS CLOB 表のプロパティを定義するキーと値のペアを含むJSONドキュメント。
PARTITION_KEYS CLOB 表のパーティション化に使用する列のリストを含むJSONドキュメント。
RETENTION NUMBER この表の保存時間。
STORAGE_DESCRIPTION CLOB 表の物理記憶域に関する情報を含むJSONドキュメント。
TARGET_TABLE VARCHAR2(4000) AWSでのリソース・リンクに使用されるターゲット表を記述するJSONドキュメント。
VERSION_ID VARCHAR2(255) 表のバージョン識別子。
VIEW_EXPANDED_TEXT CLOB Hiveとの互換性のためにAWS Glueによって導入されました。AWS Glueでは使用されません。
VIEW_ORIGINAL_TEXT CLOB Hiveとの互換性のためにAWS Glueによって導入されました。AWS Glueでは使用されません。

DCAT_ATTRIBUTESビュー

論理エンティティ属性の外部表の列へのマッピングをリストします。

Datatype 説明
DCAT_CON_ID VARCHAR2 (4000) インスタンス内で一意の接続識別子
ASSET_KEY VARCHAR2(4000) データ・カタログ・アセット・キー

ENTITY_KEY

VARCHAR2(4000)

データ・カタログ・キー

ATTRIBUTE_KEY

VARCHAR2(4000)

データ・カタログ属性キー

ORACLE_COLUMN_NAME VARCHAR2(128) マップされた列名

DCAT_ENTITIESビュー

外部表への論理エンティティのマッピングについて説明します。

Datatype 説明
DCAT_CON_ID VARCHAR2(4000) インスタンス内で一意の接続識別子
ASSET_KEY VARCHAR2(4000) データ・カタログ・アセット・キー

ENTITY_KEY

VARCHAR2(4000)

データ・カタログ・キー

FOLDER_KEY

VARCHAR2(4000)

データ・カタログ・フォルダ・キー

ORACLE_TABLE_NAME VARCHAR2(128) マップされた表名
ORACLE_SCHEMA_NAME VARCHAR2(128) マップされたスキーマ名
ENTITY_ORACLE_DB_SCHEMA VARCHAR2(4000) スキーマの取得に使用されるエンティティのoracle-db-schemaカスタム・プロパティ
ASSET_ORACLE_DB_SCHEMA VARCHAR2(4000) スキーマの導出に使用されるデータ・アセットのoracle-db-schemaカスタム・プロパティ
FOLDER_ORACLE_DB_SCHEMA VARCHAR2(4000) スキーマの取得に使用されるフォルダのoracle-db-schemaカスタム・プロパティ

DBMS_DCAT$SYNC_LOGビュー

DBMS_DCAT$SYNC_LOGビューを使用すると、現在のユーザーが実行した最後の同期操作のログ表に簡単にアクセスできます。

RUN_SYNCプロシージャへのすべてのコールは、USER_LOAD_OPERATIONSLOGFILE_TABLEフィールドがポイントする新しいログ表に記録されます。ログテーブルは2日後に自動的に削除され、ユーザーは DBMS_CLOUD.DELETE_ALL_OPERATIONSプロシージャ(タイプは DCAT_SYNC)を使用してすべての同期ログをクリアできます。

DBMS_DCAT$SYNC_LOGビューは、最新のログ表を自動的に識別します。次に、DBMS_DCAT$SYNC_LOGビューのスキーマについて説明します。アクセス権限は、個々のログ表のものと同じです。デフォルトでは、READdbms_dcatロールおよびADMINユーザーに付与されます。

ログ表の形式は次のとおりです:

Datatype 説明

LOG_TIMESTAMP

TIMESTAMP

ログ・エントリのタイムスタンプ。

LOG_LEVEL

VARCHAR2(32)

入力ログ・レベルには、OFFFATALERRORWARNINFODEBUGTRACEALLのいずれかの値を指定できます。

LOG_DETAILS VARCHAR2(32767) ログ・メッセージ。