A propos des pipelines

Accélérez vos solutions de réplication de données avec les pipelines OCI GoldenGate.

Les pipelines OCI GoldenGate vous permettent de configurer des flux de réplication de données en temps réel qui prennent en charge des cas d'utilisation stratégiques tels que les analyses, le reporting opérationnel et les intégrations cloud hybrides. Vous pouvez créer un pipeline pour diffuser des données directement à partir de bases de données opérationnelles vers des environnements analytiques sans processus d'extraction, de transformation et de chargement (ETL) traditionnels. Par exemple, vous pouvez configurer un pipeline pour répliquer directement les données d'Autonomous AI Transaction Processing vers Autonomous AI Lakehouse avec une configuration minimale.

Remarques :

Etant donné que les pipelines sont optimisés par des déploiements GoldenGate, vous pouvez rencontrer des temps d'inactivité lorsqu'une mise à niveau de déploiement se produit.

A propos des pipelines ZeroETL

ZeroETL est un modèle de conception ETL (extraction, transformation et chargement) pour le déplacement continu de données basé sur les métadonnées. ZeroETL Les pipelines miroir transmettent les modifications de base de données en continu avec connaissance des transactions et les appliquent directement à une base de données cible.

Les avantages de l'utilisation des pipelines miroir ZeroETL sont les suivants :

  • Pipelines moins nombreux à créer et à gérer : remplacez les processus ETL codés à la main et les plannings fragiles par des pipelines gérés optimisés par OCI GoldenGate.
  • Distribution plus rapide des analyses et des applications : les miroirs en temps quasi réel permettent de synchroniser les cibles pour les tableaux de bord, les fonctionnalités d'IA/ML et les microservices.
  • Meilleure qualité et cohérence des données : la réplication avec prise en compte des transactions réduit la dérive et le retraitement en aval.
  • Risque opérationnel réduit : l'orchestration, la surveillance et la gestion des erreurs gérées réduisent les tâches d'appel.
  • Normes, sécurité et gouvernance : les connexions centralisées, la gestion des informations d'identification et l'auditabilité s'alignent sur les contrôles d'entreprise.

Exemples d'utilisation des pipelines de miroir ZeroETL :

  • Analyses et business intelligence en temps réel : mettez en miroir les données opérationnelles dans des bases de données d'analyse, telles que Autonomous AI Lakehouse, pour de nouveaux tableaux de bord sans ETL nocturne.
  • Stockages de fonctionnalités d'intelligence artificielle (IA)/machine learning (ML) et génération augmentée de récupération (RAG) : gardez les fonctionnalités synchronisées entre les bases de données d'IA autonomes ou les Oracle AI Database pour alimenter l'inférence à faible latence.
  • Structure de données d'application multicloud : conservez la cohérence des données entre les régions et les clouds pour prendre en charge les applications distribuées et les modèles d'accès aux données régionaux.
  • Modernisation et migration : démarrez une cible synchronisée pendant la migration pour réduire les risques de basculement et les temps d'arrêt.

Créez des ressources de pipeline pour commencer.

Concepts de pipeline

Les concepts suivants sont essentiels pour utiliser les pipelines :

  • Pipeline : composant prédéfini qui permet de déplacer les données en temps réel et avec une latence minimale d'une base de données opérationnelle source vers un lakehouse ou une plate-forme d'analyse cible sans avoir besoin d'étapes ETL traditionnelles.
  • Type de pipeline : cas d'emploi de réplication de données courant.
  • Capture : processus qui est exécuté sur la connexion source et extrait ou capture des données. Egalement appelé processus d'extraction.
  • Appliquer : processus qui fournit des données à une base de données ou à une technologie cible, autrement appelé processus de réplication.

Types de connexion pris en charge pour les pipelines

Les pipelines OCI GoldenGate prennent actuellement en charge les bases de données Oracle suivantes :

Vous pouvez également créer une connexion dans le workflow Créer un pipeline.