パイプラインについて

OCI GoldenGate Pipelinesでデータ・レプリケーション・ソリューションを加速しましょう。

OCI GoldenGateパイプラインを使用すると、分析、運用レポート、ハイブリッド・クラウド統合などのミッション・クリティカルなユースケースをサポートするリアルタイム・データ・レプリケーション・フローを構成できます。パイプラインを作成して、従来の抽出、変換、ロード(ETL)プロセスを使用せずに、運用データベースから分析環境にデータを直接ストリーミングできます。たとえば、最小限の構成でAutonomous AI Transaction ProcessingからAutonomous AI Lakehouseにデータを直接レプリケートするパイプラインを設定できます。

ノート:パイプラインにはGoldenGateデプロイメントが搭載されているため、デプロイメント・アップグレードが発生すると、停止時間が発生する可能性があります。

ZeroETLパイプラインについて

ZeroETLは、メタデータ主導の継続的なデータ移動のためのExtract、 Transform、 and Load (ETL)設計パターンです。ZeroETL Mirrorパイプラインは、トランザクション対応でデータベースの変更をストリーミングし、ターゲット・データベースに直接適用します。

ZeroETL Mirrorパイプラインを使用する利点は次のとおりです。

構築および保守するパイプラインの削減: ハンドコードされたETLプロセスおよび不安定なスケジュールを、OCI GoldenGateを搭載した管理パイプラインに置き換えます。
分析とアプリケーションの迅速な提供: ほぼリアルタイムのミラーにより、ダッシュボード、AI/ML機能、マイクロサービスのターゲットが同期されます。
データ品質と一貫性の向上: トランザクション対応のレプリケーションにより、ドリフトおよびダウンストリームの再処理が削減されます。
運用リスクの低減: 管理されたオーケストレーション、監視、エラー処理により、オンコール・トイレが軽減されます。
標準、セキュリティ、ガバナンス: 一元化された接続、資格証明管理、および監査可能性は、エンタープライズ・コントロールと一致します。

ZeroETL Mirrorパイプラインの使用例を次に示します。

リアルタイム分析とビジネス・インテリジェンス: 業務データをAutonomous AI Lakehouseなどの分析データベースにミラーリングし、夜間のETLなしで最新のダッシュボードを実現します。
人工知能(AI)/機械学習(ML)機能ストアと検索拡張生成(RAG): 低レイテンシの推論を強化するために、Autonomous AI DatabaseまたはOracle AI Database間で機能を同期させ続けます。
マルチクラウド・アプリケーション・データ・ファブリック: リージョンやクラウド間でデータの一貫性を保ち、分散アプリケーションと地域のデータ・アクセス・パターンをサポートします。
最新化と移行: 移行中に同期されたターゲットを立ち上げ、カットオーバーのリスクとダウンタイムを削減します。

パイプライン・リソースを作成して開始します。

パイプラインの概念

パイプラインの操作には、次の概念が重要です。

パイプライン: 従来のETLステップを必要とせずに、ソース運用データベースからターゲットレイクハウスまたは分析プラットフォームへのリアルタイムで最小限のレイテンシ・データ移動を可能にする事前定義済コンポーネント。
パイプライン・タイプ: 一般的なデータ・レプリケーション・ユースケース。
取得: ソース接続に対して実行され、データを抽出(取得)するプロセス。Extractプロセスとも呼ばれます。
適用: ターゲット・データベースまたはテクノロジ(Replicatプロセス)にデータを配信するプロセス。

パイプラインでサポートされる接続タイプ

OCI GoldenGateパイプラインは現在、次のOracle Databasesをサポートしています。

「パイプラインの作成」ワークフローで接続を作成することもできます。