| Oracle® GoldenGate Oracle GoldenGate Veridataの管理 12c (12.1.3) E59460-02 |
|
 前 |
 次 |
この章では、Oracle GoldenGate Veridataの使用方法について説明します。コンポーネントの役割と相互作用、コンポーネントの構成方法およびOracle GoldenGate Veridataによる表の比較および非同期表の修復の方法の概要を示します。
この章の内容は次のとおりです。
Oracle GoldenGate Veridataは、あるデータのセットと別のデータのセットを比較して、同期していないデータを特定し、非同期のデータを修復できるようにします。Oracle GoldenGate Veridataは、大規模でデータ・セットを比較するためのダウンタイムが許容されない常時稼働の異種レプリケーション環境をサポートしています。比較を実行中にレプリケートされるデータを把握することで、Oracle GoldenGate Veridataはデータ・トランザクションおよびレプリケーションと同時に実行でき、さらに正確な比較レポートを生成できます。
Oracle GoldenGate Veridataは異なるデータベース・タイプ間で自動的に列データ型をマップします。また、異種環境で自動マッピングが異なる形式に十分対応できない場合は、手動で列をマップできます。Veridata Webユーザー・インタフェースのこの機能の詳細は、Oracle GoldenGate Veridataのオンライン・ヘルプを参照してください。または、veridata_scriptingユーティリティを使用してXMLファイルを手動でアップロードすることで、データをマップできます。詳細は、第5章「スクリプトの構成」を参照してください。
このドキュメントの目的上、次の用語は同義語とみなします。
表およびファイル
列およびフィールド
行およびレコード
Oracle GoldenGate Veridataサーバー
Oracle GoldenGate Veridataサーバーは、次の機能を実行します。
Oracle GoldenGate Veridataタスクの実行の調整
行のソート (オプション)
データの比較
非同期データの確認
確認用レポートの生成
Oracle GoldenGate Veridata Webユーザー・インタフェース
Oracle GoldenGate Veridata Webユーザー・インタフェースは、次のアクティビティに対するブラウザベースのグラフィカル・ユーザー・インタフェースです。
比較オブジェクトおよびルールの構成
比較の開始
比較のステータスおよび出力の確認
非同期データの修復
非同期データの確認
Oracle GoldenGate Veridataリポジトリ
Oracle GoldenGate Veridataリポジトリは、構成情報をディスクに保持し、ユーザー環境として永久的に保存するデータベース・オブジェクトの集まりです。
|
注意: 非同期データは、Veridataリポジトリには格納されません。このデータは、Veridataサーバーのファイル・システムのファイルに格納されます。 |
Oracle GoldenGate Veridataエージェント
Oracle GoldenGate Veridataエージェントは、Oracle GoldenGate Veridataサーバーにかわって次のデータベース関連リクエストを実行します。
初回比較のハッシュ行
行をフェッチおよび更新して、非同期データを修復します。
非同期行の列レベル詳細の戻し
Oracle GoldenGate Veridata Manager
ManagerプロセスとはCコード・ベースのエージェントの一部で、NonStopプラットフォームに必要です。Oracle GoldenGate Veridataエージェント・プロセスを制御します。
Managerは、Oracle GoldenGate Veridataによってサポートされている他のデータベースで使用されるJavaエージェントでは使用されません。
Oracle GoldenGate Veridataコマンドライン・ユーティリティ
Oracle GoldenGate Veridataには、次のコマンドライン・ユーティリティが含まれています。
表1-1 コマンドライン・ユーティリティ
| 名前 | 説明 |
|---|---|
|
|
自動化されたプログラムを使用して、比較を実行できるようにします。第4章「コマンドラインからの比較の実行」を参照してください。 |
|
|
XMLファイルの比較オブジェクトおよびルールをマップし、リポジトリにアップロードします。第5章「スクリプトの構成」を参照してください |
|
|
暗号化されたレポート・ファイルおよび非同期データの表示をサポートします。 |
Oracle GoldenGate Veridata 12.1.3では、認証のシングル・サインオン(SSO)メカニズムをサポートしています。SSOを構成するには、VeridataサーバーのSSOプロパティを設定し、SSOセッションのログアウトURLも構成する必要があります。
DOMAIN_HOME/config/veridata/veridata.cfgファイルのWebパラメータweb.singleSignOutUrlは、VeridataサーバーのSSOの構成に使用されます。パラメータの使用方法は、veridata.cfgファイルに説明されています。
# (web.singleSignOutUrl) as # web.singleSignOutUrl - Specify the Single Sign Out URL here: # Formats: /oamsso/logout.html?end_url=/veridata # http://myoamserverhost:port/oam/server/logout?end_url=http://my.veridata.site.com:veridata-port/veridata # http://myoamserverhost:port/oamsso/logout.html?end_url==http://my.veridata.site.com:veridata-port/veridata # This URL must conform to the grammar in RFC 2396, except the few deviations mentioned in the java documentation for construction of a URI by parsing the given string. web.singleSignOutUrl default
SSOを構成するには、web.singleSignOutUrlパラメータを設定し、次のようにconfigureVeridataスクリプトを実行します。
SSOログアウトを構成する場合
DOMAIN_HOME/veridata/bin/configureVeridata.sh -pUweb.singleSignOutUrl=Single sign out URL
SSOログアウトをリセットする場合
ドメインでSSOが使用されていない場合は、次のように、オプションでSSOログアウト構成を削除できます。
DOMAIN_HOME/veridata/bin/configureVeridata.sh -pUweb.singleSignOutUrl=default
この項では、比較対象のオブジェクトの構成方法およびOracle GoldenGate Veridataプロセスによる比較方法について説明します。
Oracle GoldenGate Veridataの使用を開始するには、比較するデータを識別し、作業管理に役立つオブジェクトを作成する必要があります。
データソース接続の構成: Oracle GoldenGate Veridataサーバーは比較するデータが含まれるデータベースと対話するOracle GoldenGate Veridataエージェントに接続します。接続は、ホスト、そのホスト上のOracle GoldenGate Veridataエージェントのポート番号およびエージェントがアクセスするデータソースで定義されます。
構成グループ: ソース・データソース接続およびターゲット・データソース接続のセットにリンクされている比較グループを少なくとも1つ構成する必要があります。グループとは比較するオブジェクトを編成する論理コンテナです。
比較ペアの構成: 作成する各グループに1つ以上の比較ペアを構成する必要があります。比較ペアとは対応するソース表およびターゲット表またはファイルのセットです。比較ペアの構成の一部として、2つのオブジェクト間の構造関係を設定するソース列およびターゲット列をマップします。
プロファイルの構成: プロファイルにはランタイム・パラメータの設定が含まれ、ジョブ・プロファイルの上書きとしてジョブおよび特定の比較ペアにグローバルに適用できます。プロファイル・パラメータには、ソート方法、スレッドおよびメモリーの使用量、レポート出力などの考慮事項が網羅されます。実行プロファイルの定義はオプションです。それは、Oracle GoldenGate Veridataにはほとんどの使用シナリオに適用される設定を含むデフォルト・プロファイルが含まれるためです。ただし、Oracle GoldenGate Veridataの使用を重ねるうちに、デフォルト・プロファイルをカスタマイズしたり、独自のカスタム・プロファイルを作成する必要が生じることもあります。
ジョブの構成: ジョブとは1つ以上の比較グループの論理コンテナで、比較処理を実行する作業ユニットです。1つ以上のジョブ内で、多くのデータベースおよびシステム間で大容量の比較グループを管理および実行でき、その比較のタイミングを制御できます。
詳細は、Oracle GoldenGate Veridataのオンライン・ヘルプを参照してください。
Oracle GoldenGate Veridataは、ある種の一意な識別子を使用して比較用に行を順序付けます。
主キー: デフォルトでは、主キーが使用可能な場合、Oracle GoldenGate Veridataは主キーを使用します。
一意キー: 主キーが定義されていない場合、Oracle GoldenGate Veridataは最小の一意索引を使用します。
ユーザー定義キー: 表またはファイルに主キーも一意キーもない場合、比較ペアを定義する際、既存の索引または列のセットを比較用に定義できます。ただし、主キーまたは一意キーは自動的にマップされますが、ユーザー定義キーは手動でマップする必要があります。ユーザー定義キーは、別の順序付け方法を使用する場合に既存のキーまたは索引の上書きにも使用できます。
比較用のキーの選択とマッピングの詳細は、Oracle GoldenGate Veridataのオンライン・ヘルプを参照してください。
比較アクティビティは、次の手順に分割されています。Oracle GoldenGate Veridata Webでパラメータを変更し、これらの手順の一部を変更できます。
初回比較(または行ハッシュ)手順で、行は問合せによってソース表およびターゲット表から取得されます。ソース・データベースとターゲット・データベースの型が異なる場合、列は正確に比較するために標準データ型形式に変換されます。デフォルトでは、Oracle GoldenGate Veridataは主キーのすべての列を逐語的(値対値)に比較し、すべての非キー列についてはハッシュ値を使用して行を比較します。ハッシュ値の計算に使用する一意のデジタル署名は、比較用にネットワーク上に転送されるデータを縮小する一方で、2つの行に同じ列値または異なる列値が含まれるかを決定する絶対的ではないものの非常に信頼でき、効率的なメカニズムを提供しています。
同期していない行をより確実に検出するために、非キー行をハッシュを使用せずに列対列で比較するようにOracle GoldenGate Veridataを構成できます。全列比較は列数に比例して処理パフォーマンスが下がり、ネットワーク使用量は増えます。
NonStopプラットフォームでは、サーバー側ソートを使用する場合、初回比較手順中はデルタ処理機能を使用できます。デルタ処理とは、Oracle GoldenGate Veridataが前回の比較以降データベースのどのデータ・ブロックが変更されたかを検出し、そのブロックの行のみを比較するというパフォーマンス機能です。変更されていないブロックの行はスキップされます。デフォルトでは、変更の有無にかかわらずすべての行が比較されます。
デルタ処理には、次の2つの手順があります。
後続デルタ比較の前回実行の基準変更時間の収集。この手順は、常にデルタ処理が比較ペアに対して有効化されている場合に実行されます。
最初の手順で収集された情報を使用した基準比較以降変更されたデータの比較。この処理は、Oracle GoldenGate Veridata Webの「Compare Pair Configuration」ページおよび「Run/Execute Job」ページの「Enable Delta Processing」ボタンをクリックすると有効になります。「Disable Delta Processing」ボタンを使用すると、表の再編成など、変更があった場合に収集したデルタ・ベースの情報を無効化できるデルタ比較手順を無効化できます。
デルタ処理の詳細は、Oracle GoldenGate Veridataのオンライン・ヘルプを参照してください。
初回比較後、同期していないとみなされた行はメモリー内のmaybe out-of-sync (MOOS)キューに格納されます。これは、この時点では比較結果が出ていないためです。レプリケーションが比較と同時に行われる場合、特にレプリケーション・レイテンシがある場合は、実際は現在データは処理中(レプリケーション・フローのどこかにある)で、レプリケーションによってすぐに再度同期化される場合でも、行は非同期とされる可能性があります。
確認または非同期確認(COOS)手順は、変わりつつある環境内の行ステータスを確認して正確な結果が得られるようにします。この手順では、MOOSキューから抽出された行を使用したソースまたはターゲットでの問合せを前提とし、そのステータスは次のいずれかとして評価されます。
処理中: 行は初回比較手順では非同期であったが、その後更新されました。この場合、レプリケーションまたは別のメカニズムが変更を適用したが、Oracle GoldenGate Veridataは行が同期していたことを確認できなかったとみなされます。
同期: ソース行の値はレプリケーションまたは別の方法でターゲット行に適用されました。基礎となる表が継続して変更されている場合、同期ステータスは常に行が同期されていることを保証しませんが、レプリケーションが進行中であることを示しています。
デフォルトでは、確認処理は初回比較手順と並行するスレッドで行われますが、各行の確認は指定したレプリケーションレイテンシのしきい値を過ぎるまで待機します。たとえば、レイテンシが60秒で、初回比較手順で9:30に非同期行であることが公開された場合、その行の確認手順は処理中であった変更を適用できるように9:31まで実行されません。レイテンシの計算が済んだら行は永続的非同期として確認でき、1つ以上の非同期レポートに格納されます。
ジョブが完了すると、Oracle GoldenGate Veridata Webユーザー・インタフェースを使用するか、ファイル自体を表示して、比較結果と非同期レポートを表示できます。
レポートの暗号化がVeridataサーバーで有効化されている場合は、reportutilツールを使用してレポート・ファイルを表示できます。2.5項「レポート・ファイルの暗号化」を参照してください。Veridata Webユーザー・インタフェースでは、ファイルを表示する前に自動的に復号化します。
非同期レポートをバイナリ形式、XML形式または両方(またはなし)で格納するオプションがあります。
OOSファイル: バイナリ形式で格納すると、OOSレポートには、Oracle GoldenGate Veridata Webインタフェースを使用して、行の差異の表示に使用される非同期比較結果が含まれ、レポートは、非同期行の再比較にも後で使用されます。行を再比較するには、行の現在の状態を比較し、どちらがレプリケーション後非同期のままか、または別の修復措置が適用されたかをレポートする別の確認手順を実行するオプションを選択します。
OOSXMLファイル: XMLとして格納する場合は、OOSレポートがOOSXMLファイルに書き込まれ、内部XMLスキーマに適合する構造的な方法で格納されます。XMLには多くの利点がありますが、最も大きな利点は多くのツールで簡単に操作できるという点です。XML形式の場合、ファイルには、メタデータなど、外部プログラムで再同期化する場合に行を選択する必要があるすべての情報が含まれます。
各終了ジョブ、グループおよび比較ペアは比較レポートを生成します。レポート・ファイルには、次のような実行された比較の詳細が含まれます。
ファイル自体は、次のように格納されます。
デフォルトでは、OOSファイルはOracle GoldenGate Veridataサーバー・インストール・ディレクトリのサブディレクトリに格納されます。
OOSファイル: VERIDATA_DOMAIN_HOME/veridata/reports/oos
OOSXMLファイル: VERIDATA_DOMAIN_HOME/veridata/reports/oosxml
veridata.cfgファイルのserver.veridata_dataプロパティに別のパスを指定することで、デフォルトの場所を変更できます。
これらのディレクトリは、さらに実行ID、ジョブ名、グループ名および比較ペア別に編成されます。OOSXMLディレクトリでは、拡張子が.oosxmlのファイルは制御ファイルです。順次ファイル拡張子が付いたファイルはOOSXMLチャンクです。XMLデータは、パフォーマンス上の理由で「チャンク」という複数のファイルにまたがっています。
比較レポートの暗号化を選択できます。詳細は、2.5項「レポート・ファイルの暗号化」を参照してください。
