À propos des pipelines
Accélérez vos solutions de réplication de données avec les pipelines OCI GoldenGate.
Les pipelines OCI GoldenGate vous permettent de configurer des flux de réplication de données en temps réel qui prennent en charge des cas d'utilisation critiques tels que l'analyse, la production de rapports opérationnels et les intégrations en nuage hybrides. Vous pouvez créer un pipeline pour diffuser des données directement à partir de bases de données opérationnelles vers des environnements analytiques sans processus traditionnels d'extraction, de transformation et de chargement (ETL). Par exemple, vous pouvez configurer un pipeline pour répliquer directement des données du service Traitement des transactions d'IA autonome vers un entrepôt avec lac de données d'IA autonome avec une configuration minimale.
Note :
Étant donné que les pipelines sont alimentés par des déploiements GoldenGate, vous pouvez subir un temps d'arrêt lorsqu'une mise à niveau du déploiement se produit.À propos des pipelines ZeroETL
ZeroETL est un modèle de conception d'extraction, de transformation et de chargement (ETL) pour le déplacement continu des données basé sur les métadonnées. ZeroETL Mettre en miroir les modifications de base de données de flux de pipelines avec prise en compte des transactions et les appliquer directement à une base de données cible.
Les avantages liés à l'utilisation des pipelines miroir ZeroETL sont les suivants :
- Réduction des pipelines à créer et à tenir à jour : Remplacez les processus ETL codés à la main et les programmes fragiles par des pipelines gérés alimentés par OCI GoldenGate.
- Distribution plus rapide des analyses et des applications : Des miroirs quasi en temps réel assurent la synchronisation des cibles pour les tableaux de bord, les fonctions d'intelligence artificielle et d'apprentissage automatique et les microservices.
- Amélioration de la qualité et de la cohérence des données : Une réplication consciente des transactions réduit les risques de dérive et de retraitement en aval.
- Risque opérationnel faible : L'orchestration gérée, la surveillance et le traitement des erreurs réduisent le travail sur appel.
- Normes, sécurité et gouvernance : Les connexions centralisées, la gestion des données d'identification et la vérifiabilité sont conformes aux contrôles de l'entreprise.
Exemples d'utilisation de pipelines de mise en miroir ZeroETL :
- Analyse en temps réel et intelligence d'affaires : Permettent la mise en miroir des données opérationnelles dans les bases de données d'analyse, telles qu'entrepôt avec lac de données autonome avec intelligence artificielle, pour de nouveaux tableaux de bord sans extraction, transformation et chargement (ETC) tous les soirs.
- Stockages de fonctions d'intelligence artificielle/apprentissage automatique et génération augmentée par extraction : Synchroniser les fonctions entre les bases de données autonomes d'IA ou Oracle AI Database pour alimenter l'inférence à faible latence.
- Structure de données d'application multinuage : assure l'uniformité des données entre les régions et les nuages pour la prise en charge des applications réparties et des modèles d'accès aux données régionaux.
- Modernisation et migration : Configurez une cible synchronisée lors de la migration pour réduire le risque de mise en service et le temps d'arrêt.
Créez des ressources de pipeline pour commencer.
Concepts relatifs aux pipelines
Les concepts suivants sont essentiels à l'utilisation des pipelines :
- Pipeline : Composant prédéfini qui permet le déplacement des données en temps réel avec une latence minimale entre une base de données opérationnelle source et une plate-forme d'analyse ou d'entrepôt avec lac de données cible sans avoir à suivre les étapes d'extraction, de transformation et de chargement classiques.
- Type de pipeline : Cas d'utilisation commun de la réplication des données.
- Capture : Processus qui s'exécute sur la connexion source et extrait ou saisit des données. Également appelé processus d'extraction.
- Appliquer : Processus qui transmet des données à une base de données ou à une technologie cible, autrement appelé processus de réplication.
Types de connexion pris en charge pour les pipelines
Les pipelines OCI GoldenGate prennent actuellement en charge les bases de données Oracle suivantes :
- Oracle Autonomous AI Database
- Oracle AI Database
- Oracle Exadata
- Oracle Database@AWS - Base de données autonome
- Oracle Database@AWS - Exadata
- Oracle Database@Azure - Base de données autonome
- Oracle Database@Azure - Exadata
- Oracle Database@Google Cloud - Base de données autonome
- Oracle Database@Google Cloud - Exadata
- Amazon RDS Oracle Database
Vous pouvez également créer une connexion dans le flux de travail Créer un pipeline.