パイプラインについて

OCI GoldenGate Pipelinesでデータ・レプリケーション・ソリューションを加速します。

OCI GoldenGateパイプラインを使用すると、分析、運用レポート、ハイブリッド・クラウド統合などのミッション・クリティカルなユースケースをサポートするリアルタイムのデータ・レプリケーション・フローを構成できます。パイプラインを作成して、従来の抽出、変換、ロード(ETL)プロセスを使用せずに、運用データベースから分析環境にデータを直接ストリーミングできます。たとえば、最小限の構成で、Autonomous AI Transaction ProcessingからAutonomous AI Lakehouseにデータを直接レプリケートするようにパイプラインを設定できます。

ノート:

パイプラインはGoldenGateデプロイメントによって供給されるため、デプロイメントのアップグレードが発生すると、停止時間が発生することがあります。

ZeroETLパイプラインについて

ZeroETLは、メタデータ主導の継続的なデータ移動のためのExtract、TransformおよびLoad (ETL)設計パターンです。ZeroETLミラー・パイプラインは、トランザクションを認識してデータベースの変更をストリーミングし、ターゲット・データベースに直接適用します。

ZeroETLミラー・パイプラインを使用する利点は次のとおりです。

  • 構築および保守するパイプラインが少ない: 手書きのETLプロセスと不安定なスケジュールを、OCI GoldenGateを搭載したマネージド・パイプラインに置き換えます。
  • 分析とアプリケーションの配信の高速化: ほぼリアルタイムのミラーにより、ダッシュボード、AI/ML機能、マイクロサービスのターゲットを同期させることができます。
  • データ品質と一貫性の向上: トランザクション対応のレプリケーションにより、ドリフトとダウンストリームの再処理が削減されます。
  • 運用リスクの低減: 管理されたオーケストレーション、監視、およびエラー処理により、オンコールの障害が軽減されます。
  • 標準、セキュリティおよびガバナンス: 一元化された接続、資格証明管理および監査可能性は、エンタープライズ・コントロールと一致します。

ZeroETLミラー・パイプラインを使用できる例を次に示します。

  • リアルタイム分析とビジネス・インテリジェンス: 業務データをAutonomous AI Lakehouseなどの分析データベースにミラーリングし、夜間ETLのない新しいダッシュボードを実現します。
  • 人工知能(AI)/機械学習(ML)機能ストアと検索拡張生成(RAG): Autonomous AI DatabaseまたはOracle AI Database間で機能を同期させ、低レイテンシの推論を強化します。
  • マルチクラウド・アプリケーション・データ・ファブリック: リージョンとクラウド間でデータの一貫性を維持し、分散アプリケーションと地域のデータ・アクセス・パターンをサポートします。
  • 最新化と移行: 移行中に同期されたターゲットを立ち上げ、カットオーバーのリスクとダウンタイムを削減します。

パイプライン・リソースを作成して開始します。

パイプラインの概念

パイプラインを操作するには、次の概念が必要です:

  • パイプライン: 従来のETLステップを必要とせずに、ソース運用データベースからターゲット・レイクハウスまたは分析プラットフォームへのリアルタイムで最小限のレイテンシのデータ移動を可能にする事前定義されたコンポーネント。
  • パイプライン・タイプ: 一般的なデータ・レプリケーションのユースケース。
  • 取得: ソース接続に対して実行され、データを抽出(取得)するプロセス。Extractプロセスとも呼ばれます。
  • 適用: ターゲット・データベースまたはテクノロジ(Replicatプロセス)にデータを配信するプロセス。

パイプラインでサポートされている接続タイプ

OCI GoldenGateパイプラインは現在、次のOracle Databasesをサポートしています:

「パイプラインの作成」ワークフローで接続を作成することもできます。