Mettre en miroir les données avec les pipelines miroir ZeroETL

Découvrez comment mettre en miroir les données d'Autonomous AI Transaction Processing vers Autonomous AI Lakehouse à l'aide de pipelines de miroir ZeroETL.

Avant de commencer

Effectuez les opérations suivantes :

  • Vérifiez les versions de base de données source et cible. La version de la base de données cible doit être identique ou supérieure à celle de la base de données source.
  • Assurez-vous de préparer la base de données pour Oracle GoldenGate.
  • Vérifiez et configurez l'unicité des lignes dans les tables de base de données afin d'éviter les problèmes de clé primaire avec la mise en miroir ZeroETL. Les clés primaires identifient de manière unique un enregistrement ou une ligne dans une table de base de données. Reportez-vous à Vérification de l'unicité des lignes dans les tables source et cible.
  • Vérifiez la vue DBA_GOLDENGATE_SUPPORT_MODE sur la base de données source qui affiche des informations sur le niveau de prise en charge du processus de capture Oracle GoldenGate pour les tables de la base de données.
  • Ajoutez les stratégies minimales requises pour les pipelines GoldenGate.

Tâche 1 : créer le pipeline

Pour créer un pipeline, procédez comme suit :
  1. Sur la page Aperçu d'OCI GoldenGate, dans le menu GoldenGate, cliquez sur Pipelines.

    Vous pouvez également cliquer sur Data Fabric, puis sur Créer un pipeline.

  2. Sur la page Pipelines, cliquez sur Créer un pipeline.
  3. Dans le panneau Créer un pipeline, renseignez les champs suivants, puis cliquez sur Créer un pipeline :
    1. Dans Nom, saisissez le nom du pipeline.
    2. (Facultatif) Dans Description, entrez une description permettant de distinguer ce pipeline des autres.
    3. Dans Compartiment, sélectionnez le compartiment dans lequel créer le pipeline.
    4. Sélectionnez un type de licence.
    5. Créez vos connexions source et cible. Pour ce démarrage rapide, créez des connexions Oracle Autonomous Database.
    6. (Facultatif) Cliquez sur Afficher les options avancées pour configurer les options de processus :
      • Copier les données existantes avant la réplication en cours : sélectionnez cette option pour effectuer un chargement initial des données. Pour les tables existantes, vous pouvez choisir :
        • Tronquer : supprime les lignes existantes, puis charge les lignes à partir de la source.
        • Remplacer : supprime la table existante, puis la crée et la charge à partir de la source.
        • Ajouter : laisse les lignes existantes inchangées et charge les lignes à partir de la source.
        • Ignorer : permet de quitter la table telle quelle et de passer à l'objet suivant.
      • Remplacer les modifications de schéma : lorsque cette option est sélectionnée, choisissez l'action à effectuer sur les schémas existants lorsque le processus rencontre une erreur :
        • Mettre fin : annulez la transaction et arrêtez le traitement.
        • Annuler : consignez l'erreur dans le fichier de rebut et poursuivez le traitement.
        • Ne pas prendre en compte : ignore l'erreur et poursuit le traitement.
      • Action en cas d'erreur LMD : sélectionnez l'action à effectuer sur les données existantes lorsque le processus rencontre une erreur LMD :
        • Mettre fin
        • Annuler
        • Ne pas prendre en compte
      • Redémarrer après l'échec : sélectionnez cette option pour activer le redémarrage automatique si le processus s'arrête pour une raison quelconque.
      • Démarrer le pipeline à l'aide du mapping par défaut : démarre le pipeline immédiatement après sa création avec les règles de mapping 1:1 par défaut. Si cette option n'est pas sélectionnée, vous pouvez configurer les mises en correspondance de règles après leur création, puis démarrer manuellement le pipeline.

Tâche 2 : Ajouter des règles de mise en correspondance

Les règles de mise en correspondance vous permettent de modifier la mise en correspondance par défaut des tables et des schémas source avec la cible.

Pour prévisualiser, ajouter ou supprimer des règles de mappage :
  1. Sur la page d'informations Pipeline, sélectionnez Règles de mise en correspondance.
  2. Dans la liste des règles de mise en correspondance, vous pouvez vérifier ou modifier les règles de mise en correspondance actuelles et :
    • Aperçu : vérifiez l'impact des règles de mise en correspondance sur les schémas et les tables inclus dans la réplication.
    • Ajouter : identifiez les tables et les schémas à inclure ou à exclure. Vous pouvez utiliser le nom d'objet complet ou des caractères génériques à la place de n'importe quelle partie du nom d'objet. Pour plus d'informations, reportez-vous à Utilisation de caractères génériques dans les noms d'objet de base de données.
    • Enlever : enlevez les règles de mise en correspondance.

Tâche 3 : activer la journalisation

Pour activer la connexion au pipeline, procédez comme suit :
  1. Sur la page Pipelines, sélectionnez le pipeline pour lequel activer la journalisation.
  2. Sur la page Détails des pipelines, sélectionnez Journaux.
  3. Dans la liste des pipelines, dans le menu Action, sélectionnez Activer le journal pour le pipeline à activer.
  4. Dans le panneau Activer le journal, procédez comme suit :
    1. Dans Nom de journal, saisissez un nom.
    2. Dans la liste déroulante Compartiment, sélectionnez un compartiment.
    3. Pour Groupe de journaux, vous pouvez effectuer les opérations suivantes :
      • Sélectionner un groupe dans la liste déroulante
      • Créez un groupe
      • Laissez-la vide et un groupe par défaut est automatiquement affecté
  5. Dans Conservation de journal, sélectionnez le nombre de mois dans la liste déroulante.
  6. Cliquez sur Activer le journal.
Attendez que le statut devienne Actif.

Tâche 4 : démarrer le pipeline

Pour démarrer le pipeline, procédez comme suit :
  1. Sur la page de détails du pipeline, dans le menu Actions, sélectionnez Démarrer.
  2. Sur la page de détails du pipeline, sélectionnez Initialisation.

    Les étapes d'initialisation affichent le statut en cours des étapes de pipeline. Pour chaque étape, vous pouvez sélectionner Visualiser les détails dans son menu Actions et vérifier les messages correspondants.

  3. Une fois que le pipeline a le statut Actif (En cours d'exécution), sélectionnez Exécution.

    Les processus d'exécution affichent l'état et la latence des processus Capture et Apply.