Guide de dimensionnement et de planification de la capacité OCI GoldenGate

Utilisez ce guide pour planifier les déploiements gérés de réplication de données sur Oracle Cloud Infrastructure (OCI), Microsoft Azure et Google Cloud.

Cet article fournit des directives de dimensionnement des processus et des ressources de référence pour les déploiements de réplication de données OCI GoldenGate. Vos équipes d'implémentation et vous-même pouvez l'utiliser comme point de départ structuré pour sélectionner la capacité de déploiement et commencer les tests de configuration et d'intégration.

OCI GoldenGate est un service cloud Oracle géré disponible sur OCI, Microsoft Azure et Google Cloud. Vous sélectionnez la capacité de déploiement et configurez les processus de réplication. Oracle exploite l'infrastructure de service sous-jacente. Les ressources de base de données source, les performances de base de données cible, la connectivité réseau et la configuration de réplication font toujours partie du plan de capacité de bout en bout.

Cet article couvre :

Cet article ne couvre pas :

Pour les topologies hybrides, dimensionner chaque composant selon son modèle de fonctionnement. Une extraction côté source gérée par le client nécessite toujours une capacité d'hôte et de base de données, même lorsqu'elle envoie des modifications à OCI GoldenGate.

Remarque : ce document fournit des conseils sur le dimensionnement des références, mais ne garantit pas les performances, l'évolutivité ou la capacité. La consommation réelle des ressources varie en fonction du volume de transactions, de la taille des transactions, des transformations, de la topologie, des exigences de latence et des performances cible. Réalisez une étude de faisabilité à l'aide de charges de travail représentatives de la production avant de les déployer en production.

Prévoir une marge raisonnable lors des tests initiaux. Les déploiements sous-dimensionnés peuvent subir une pression sur les ressources, une croissance des traces, un décalage de réplication ou une instabilité des processus. Surveillez la phase de limitation avant d'augmenter les ressources ou le parallélisme.

Base de ces recommandations

Les recommandations de dimensionnement contenues dans ce document ne sont pas basées sur un seul référentiel ou une charge de travail synthétique. GoldenGate traite un large éventail de profils de transaction, de modèles de données et de topologies de réplication, afin qu'aucune figure de débit unique ne puisse représenter tous les environnements client.

Au lieu de cela, les lignes directrices de ce document reflètent une combinaison des éléments suivants :

Ces recommandations constituent un point de départ pratique pour le provisionnement et la planification du déploiement de l'infrastructure. Les besoins réels en ressources dépendent des caractéristiques de la charge globale, notamment le volume des transactions, la taille des transactions, les taux de génération des informations de journalisation, les besoins en latence, la complexité des transformations, les conditions réseau et les performances du système cible.

Les clients doivent traiter ces recommandations comme des recommandations de référence et les valider par des tests de validation de concept et une surveillance opérationnelle avant le déploiement de la production.

Niveaux de classification de charge globale

Avant de sélectionner un profil de dimensionnement, classez la charge globale à l'aide du tableau ci-dessous. Ces libellés décrivent la complexité de la planification. Ils ne mettent pas en correspondance les taux de journalisation ou les nombres de tables avec une exigence d'OCPU garantie. Lorsque la demande varie, testez la période la plus occupée et la charge de travail de récupération.

Attribut Petite Moyen Grand Très grande
Profil de charge globale cible Développement / Assurance qualité ou faible volume OLTP du service OLTP d'entreprise / DW Topologie complexe ou à volume élevé
Nombre moyen de fichiers de journalisation par heure (Go) < 1 Go 1-100 GO 100-300 GO > 300 GO
Portée de réplication Portée de source et de cible limitée Plusieurs partitions de charge globale Sources ou cibles multiples Concomitance élevée ou extension étendue
Mise en évidence du dimensionnement Validation fonctionnelle Demande soutenue Capacité maximale et capacité de récupération Partitionnement et limites de défaillance

Remarque : La taille de la base de données, TPS (Transactions par seconde) et le nombre de tables ne sont pas à eux seuls des prédicteurs fiables de la consommation des ressources. Collectez les octets de journalisation/journal source, les caractéristiques des transactions, les octets de trace capturés et le trafic de connexion séparément. Pour les sources Oracle, validez les mesures de journalisation avec l'administrateur de base de données et évitez de compter plusieurs fois les copies de journaux archivés ou les threads RAC en double.

Workflow de dimensionnement initial

  1. Mesurez la charge de travail source.

    • Collectez le taux de génération des informations de journalisation.
    • Comprendre les caractéristiques des transactions.
    • Identifiez le nombre de sources et de cibles.
  2. Sélectionnez un profil de charge de travail.

    • Utilisez la table Niveaux de classification de charge globale pour identifier les cas de test requis.
  3. Créer des ressources pour la réplication de données.

    • Sélectionnez les OCPU de base et le redimensionnement automatique. Vérifiez la limite de cloud, de région, de création et de stockage.
  4. Configurez GoldenGate.

  5. Etablissez une ligne de base de surveillance.

    • Capturer les OCPU consommées, la mémoire, le décalage des processus et la croissance des traces dès le premier jour.
  6. Validez le dimensionnement.

    • Exécutez des charges de travail normales et durables de pointe, de charge initiale et de récupération des pannes.
  7. Ajustez les ressources selon vos besoins.

    • Modifiez la ressource de limitation ou le paramètre de processus pris en charge, puis répétez le test.

Redimensionnement du calcul et du stockage

OCI GoldenGate alloue des ressources aux déploiements gérés. Le tableau suivant récapitule des exemples de configuration de base et le modèle d'allocation documenté. Les valeurs de développement et de production constituent des orientations de planification initiale. Les valeurs les plus importantes sont des exemples de configuration plutôt que des recommandations de niveau charge globale.

Philosophie de dimensionnement :

Ressource Développement/Test Début de production Exemple plus grand Base maximum
OCPU de base 1 4 8 24
Allocation de mémoire de base 16 Go 64 Go 128 GO 384 GO
Allocation réseau de base 1 Gbit/s 4 Gbits/s 8 Gbits/s 24 Gbits/s
Stockage (trails, autres fichiers) 500 GO 2 To 4 To 12 To

Conseils sur les OCPU

Conseils relatifs à la mémoire

Conseils relatifs au stockage et aux E/S

Stratégie de conservation des traces

Basez la conservation de la trace sur les objectifs de reprise d'activité, les procédures opérationnelles et la durée maximale prévue des pannes des systèmes en aval. La fenêtre requise doit également couvrir le redémarrage, le rattrapage, la réponse de l'opérateur et toute exigence de réexécution supplémentaire.

Exemple de démarrage des cibles de conservation :

Type de déploiement Conservation de trace recommandée
Développement / Assurance qualité 4-8 heures
Production (cible unique) 24 heures
Production (charges de travail critiques) 48-72 heures
Déploiements inter-région/WAN 72heures et plus

Il s'agit d'exemples de cibles de démarrage. La fenêtre sélectionnée doit couvrir la procédure de récupération réelle et respecter la limite de stockage de déploiement confirmée.

Calcul du stockage de trace

Lors du dimensionnement du stockage de trace, tenez compte des éléments suivants :

Utilisez cette formule :

Required Trail Storage = Peak Trail GB/hour x Retention Hours x Safety Factor

Exemple : 100 Go/heure x 24 heures x 1,5 = 3 600 Go (3,6 To)

Le facteur de sécurité est une référence de planification et non une règle d'allocation de service géré. Utilisez les octets de génération de trace mesurés pour chaque copie de trace locale, ajoutez la réserve hors trace et incluez la coupure complète, le redémarrage, le rattrapage et l'intervalle de réponse sans compter les mêmes données deux fois.

Remarque : l'exemple illustre le calcul et il ne s'agit pas d'une recommandation de capacité de déploiement unique. Validez la conservation et le partitionnement de la charge globale par rapport à la capacité confirmée de chaque déploiement.

GoldenGate recommandations sur le nombre de processus

Le tableau suivant indique le nombre de processus recommandés par déploiement de réplication de données OCI GoldenGate pour chaque niveau de charge globale. Ces décomptes supposent un modèle de déploiement à source unique et multicible. Pour les configurations multi-source, multipliez le nombre d'extractions par le nombre de bases de données source et ajustez le nombre d'OCPU en conséquence.

Processus GG Petite Moyen Grand Très grande
Extraction (intégrée) 1 1-2 1-2 2-4
Chemins de distribution 1-2 2-4 4-8 8-16
Réplication (classique) 1-2 2-5 5-15 15-30
Réplication (parallèle) 1 1-2 2-4 4-8
Replicat (coordonné) 1-2 2-5 Entre 5 et 10 10-0
Nombre maximum de traitements simultanés 2-4 8-14 16-34 36-70

Pour plusieurs sources, tenez compte de chaque portée de capture prise en charge et ajustez le calcul en conséquence. Appliquez la console et l'allocation de processus simultanés dans le guide OCPU, puis validez la mémoire, la capacité cible et la demande de pointe. Partitionnez la charge globale entre les déploiements lorsqu'un déploiement ne répond pas aux exigences testées.

Instructions relatives au processus d'extraction

Directives relatives au service de distribution

Directives relatives au processus de réplication

Considérations relatives à l'OCPU

Conseils relatifs à la topologie de récupération après sinistre

OCI GoldenGate exploite l'infrastructure de service. Sélectionnez une topologie de récupération gérée en fonction des objectifs de récupération et de la disponibilité des fonctionnalités dans le cloud et la région sélectionnés. La récupération de base de données, de réseau, de réplication et d'applications reste une partie de la conception complète.

Déploiement unique

Déploiements principaux et homologues

Sauvegardes et maintenance de déploiement

Valeur de référence de surveillance et de mesure

Établir une ligne de base de surveillance à partir du premier jour. Suivez en permanence la consommation de services, les performances des processus, les ressources de base de données et l'itinéraire complet de la source vers la cible pour les déploiements de production.

Mesures OCI Monitoring

Vous pouvez consulter la liste complète des mesures disponibles dans Mesures de réplication de données.

Configurez des alarmes dans OCI Monitoring pour les échecs de processus, les violations de fraîcheur, la progression bloquée et la prévision de l'épuisement du stockage. Les seuils doivent prévoir du temps pour la réponse de l'opérateur. Le service OCI Notifications fournit ces alarmes.

Critères de validation du dimensionnement initial

Après le déploiement et les tests de charge globale représentatifs, validez le dimensionnement par rapport aux objectifs de l'application. Définissez des seuils de décalage, de ressource et de rattrapage numériques pour chaque charge globale au lieu de les traiter comme des limites de service universel.

Un déploiement correctement dimensionné doit présenter :

Incluez le chevauchement de charge initiale, les sauvegardes, la maintenance et la croissance prévisionnelle dans le test. Taux d'obtention record, retard dans le pire des cas, stockage conservé, temps de récupération, résultats de cohérence et conditions nécessitant un nouvel exercice de dimensionnement.

Liste de contrôle de pré-provisionnement

Complétez la liste de contrôle suivante avant de provisionner le déploiement OCI GoldenGate initial. La collecte anticipée de ces informations réduit les délais de déploiement et le redimensionnement postérieur au déploiement.

  1. Collectez le taux de génération des fichiers de journalisation maximal et moyen à partir de la base de données source (par heure et par jour).
  2. Identifiez les tables répliquées, les tailles de ligne, les objets LOB, les transactions les plus volumineuses, les filtres et les transformations.
  3. Déterminez le nombre de sources et de cibles, le placement du déploiement et les routes LAN/WAN/inter-cloud.
  4. Confirmer les combinaisons d'adresses prises en charge et la technologie de déploiement.
  5. Confirmez le contrat de niveau de service de latence (exigence de fraîcheur des données) avec le propriétaire de l'application.
  6. Sélectionnez les OCPU de base et le redimensionnement automatique. Enregistrez les autorisations de console et de processus simultanés.
  7. Dimensionnez chaque copie de trace conservée, chaque backlog de récupération, chaque réserve hors trace et chaque stratégie de purge protégée par un point de reprise.
  8. Validez le débit mesuré et la latence d'acheminement lors de la demande normale, de pointe et de récupération.
  9. Mesurez l'impact de la journalisation supplémentaire et validez la capacité d'extraction source et d'application cible.
  10. Définissez les privilèges source/cible, les informations d'identification, les stratégies d'accès, le DNS, le routage et les ports de processus d'écoute requis.
  11. Choisissez une topologie de récupération et confirmez la disponibilité des homologues, des sauvegardes et des builds dans le cloud sélectionné.
  12. Planifiez le chargement initial et une limite de synchronisation cohérente. Conservez les journaux/trails pendant le rattrapage.
  13. Établir des critères de surveillance, d'alarme, de propriété de l'opérateur et d'acceptation des tests représentatifs.

Avis de non-responsabilité

Oracle a basé ces recommandations sur des modèles de déploiement courants et des tests internes. Les besoins réels en ressources peuvent varier en fonction des caractéristiques de la charge globale, notamment la complexité des transactions, la combinaison DML/DDL, la latence du réseau, les performances de la base de données cible et la configuration de la journalisation supplémentaire.

Ces recommandations reflètent les caractéristiques communes de déploiement dans les environnements client Oracle GoldenGate et l'expérience d'ingénierie interne Oracle. Ils ont l'intention de fournir un point de départ pratique pour la planification de la capacité plutôt que de remplacer la validation de la performance propre à la charge de travail.

Oracle Corporation et ses affiliés ne donnent aucune garantie, expresse ou implicite, quant à l'exactitude, l'exhaustivité ou l'adéquation de ces recommandations pour un environnement donné. Les clients sont responsables de la validation de toutes les recommandations et du dimensionnement par rapport à leurs propres charges de travail de production avant la mise en service.