A propos de pipelines

Accélérez vos solutions de réplication de données avec OCI GoldenGate Pipelines.

Les pipelines OCI GoldenGate vous permettent de configurer des flux de réplication de données en temps réel qui prennent en charge des cas d'utilisation critiques tels que les analyses, le reporting opérationnel et les intégrations cloud hybrides. Vous pouvez créer un pipeline pour diffuser des données directement à partir de bases de données opérationnelles vers des environnements analytiques sans processus d'extraction, de transformation et de chargement (ETL) traditionnels. Par exemple, vous pouvez configurer un pipeline pour répliquer directement les données d'Autonomous AI Transaction Processing vers Autonomous AI Lakehouse avec une configuration minimale.

Remarque : étant donné que les pipelines sont optimisés par les déploiements GoldenGate, vous risquez de connaître un temps d'inactivité lorsqu'une mise à niveau de déploiement se produit.

A propos des pipelines ZeroETL

ZeroETL est un modèle de conception ETL (extraction, transformation et chargement) pour le déplacement continu des données basé sur les métadonnées. Les pipelines ZeroETL Mirror diffusent les modifications de base de données avec une connaissance transactionnelle et les appliquent directement à une base de données cible.

Avantages de l'utilisation des pipelines ZeroETL Mirror :

moins de pipelines à créer et à gérer : remplacez les processus ETL codés à la main et les programmations fragiles par des pipelines gérés optimisés par OCI GoldenGate.
Distribution plus rapide des analyses et des applications : les miroirs en temps quasi réel permettent de synchroniser les cibles pour les tableaux de bord, les fonctionnalités d'IA/ML et les microservices.
Meilleure qualité et cohérence des données : la réplication avec prise en compte des transactions réduit la dérive et le retraitement en aval.
Risque opérationnel réduit : l'orchestration, la surveillance et la gestion des erreurs gérées réduisent les tâches d'appel.
Normes, sécurité et gouvernance : les connexions centralisées, la gestion des informations d'identification et l'auditabilité s'alignent sur les contrôles d'entreprise.

Exemples d'utilisation de pipelines ZeroETL Mirror :

Analyses en temps réel et business intelligence : mettez en miroir les données opérationnelles dans des bases de données d'analyse, telles que Autonomous AI Lakehouse, pour de nouveaux tableaux de bord sans ETL nocturne.
Stockages de fonctionnalités d'intelligence artificielle (IA)/machine learning (ML) et génération augmentée de récupération (RAG) : gardez les fonctionnalités synchronisées entre les bases de données d'IA autonomes ou les bases de données Oracle AI pour alimenter l'inférence à faible latence.
Structure de données d'application multicloud : conservez la cohérence des données entre les régions et les clouds pour prendre en charge les applications distribuées et les modèles d'accès aux données régionaux.
Modernisation et migration : démarrez une cible synchronisée pendant la migration pour réduire les risques de basculement et les temps d'arrêt.

Créez des ressources de pipeline pour commencer.

Concepts de pipeline

Les concepts suivants sont essentiels pour utiliser les pipelines :

Pipeline : composant prédéfini qui permet un déplacement de données en temps réel et à latence minimale d'une base de données opérationnelle source vers un lakehouse ou une plate-forme d'analyse cible sans nécessiter d'étapes ETL traditionnelles.
Type de pipeline : cas d'utilisation courant de la réplication de données.
Capture : processus qui est exécuté sur la connexion source et extrait ou capture des données. Egalement appelé processus Extract.
Appliquer : processus qui fournit des données à une technologie ou à une base de données cible, appelée processus Replicat.

Types de connexion pris en charge pour les pipelines

OCI GoldenGate Pipelines prend actuellement en charge les bases de données Oracle suivantes :

Vous pouvez également créer une connexion dans le workflow Créer un pipeline.