Guía de planificación de tamaño y capacidad de OCI GoldenGate
Utilice esta guía para planificar despliegues de replicación de datos gestionados en Oracle Cloud Infrastructure (OCI), Microsoft Azure y Google Cloud.
En este artículo se proporcionan directrices de tamaño de recursos y procesos de línea base para despliegues de replicación de datos GoldenGate de OCI. Usted y sus equipos de implantación pueden utilizar esto como un punto de partida estructurado para seleccionar la capacidad de despliegue y comenzar las pruebas de configuración e integración.
OCI GoldenGate es un servicio gestionado en la nube de Oracle disponible en OCI, Microsoft Azure y Google Cloud. Puede seleccionar la capacidad de despliegue y configurar los procesos de replicación. Oracle opera la infraestructura de servicios subyacente. Los recursos de la base de datos de origen, el rendimiento de la base de datos de destino, la conectividad de red y la configuración de replicación siguen formando parte del plan de capacidad integral.
Este artículo cubre:
- OCI GoldenGate gestionó despliegues de replicación de datos en OCI, Azure y Google Cloud.
- Orígenes y destinos relacionales soportados de Oracle Database y que no sean de Oracle, utilizando las tecnologías de despliegue y las compilaciones disponibles en la nube y la región seleccionadas.
- Capacidad de extracción, ruta de distribución, ruta de receptor y replicación en cada despliegue gestionado.
- Retención de pistas, acumulación de recuperación, demanda de red y validación de tamaño representativo de la producción.
Este artículo no cubre:
- Instalaciones GoldenGate autogestionadas en servidores físicos, máquinas virtuales o Kubernetes.
- Transformaciones de datos, verificación de datos y análisis de flujo, que requieren modelos de capacidad independientes.
- Tamaño del hardware de la base de datos y diseño detallado de arquitecturas federadas o activas complejas.
Para topologías híbridas, dimensione cada componente según su modelo operativo. Una extracción de origen gestionada por el cliente aún requiere capacidad de host y base de datos, incluso cuando envía cambios a OCI GoldenGate.
Nota: Este documento proporciona orientación sobre el tamaño de la línea base, pero no garantiza el rendimiento, la escalabilidad ni la capacidad. El consumo real de recursos varía según el volumen de transacciones, el tamaño de las transacciones, las transformaciones, la topología, los requisitos de latencia y el rendimiento de destino. Complete una prueba de concepto con cargas de trabajo representativas de producción antes de desplegarlas en producción.
Proporcionar margen de maniobra razonable durante las pruebas iniciales. Las implementaciones de tamaño insuficiente pueden experimentar presión de recursos, crecimiento de pistas, retraso de replicación o inestabilidad de procesos. Supervise la etapa de limitación antes de aumentar los recursos o el paralelismo.
Bases de estas recomendaciones
Las recomendaciones de tamaño de este documento no se basan en una única referencia ni en una carga de trabajo sintética. GoldenGate procesa una amplia gama de perfiles de transacción, modelos de datos y topologías de replicación, por lo que ninguna figura de rendimiento único puede representar todos los entornos de cliente.
En cambio, la orientación de este documento refleja una combinación de:
- Actividades de validación de escalabilidad y pruebas de rendimiento de Oracle Product Development
- Investigaciones de ingeniería de rendimiento y soporte de Oracle
- Patrones de despliegue observados a partir de implantaciones de clientes
- Experiencia en consultoría e ingeniería de campo de Oracle
- Mejores prácticas operativas de entornos GoldenGate de producción
Estas recomendaciones proporcionan un punto de partida práctico para la planificación del aprovisionamiento y el despliegue de infraestructuras. Los requisitos reales de los recursos dependen de las características de la carga de trabajo, como el volumen de transacciones, el tamaño de las transacciones, las tasas de generación de redo, los requisitos de latencia, la complejidad de la transformación, las condiciones de red y el rendimiento del sistema de destino.
Los clientes deben considerar estas recomendaciones como orientación de referencia y validarlas mediante pruebas de concepto y control operativo antes del despliegue en producción.
Niveles de clasificación de carga de trabajo
Antes de seleccionar un perfil de tamaño, clasifique la carga de trabajo mediante la siguiente tabla. Estas etiquetas describen la complejidad de la planificación; no asignan ratios de redo ni recuentos de tablas a un requisito de OCPU garantizado. Cuando la demanda varía, pruebe el período sostenido de mayor actividad y la carga de trabajo de recuperación.
| Atributo | Pequeño | Media | Grande | Muy grande |
|---|---|---|---|---|
| Perfil de carga de trabajo de destino | Desarrollo/QA o bajo volumen | OLTP de departamento | OLTP y almacén de datos empresariales | Topología de alto volumen o compleja |
| Redo medio por hora (GB) | < 1 GB | 1-100 GB | 100-300 GB | > 300 GB |
| Ámbito de Replicación | Ámbito de origen y destino limitado | Varias particiones de carga de trabajo | Varios orígenes o destinos | Alta simultaneidad o amplia fan-out |
| Énfasis en el tamaño | Validación funcional | Demanda sostenida | Pico y capacidad de recuperación | Partición y límites de fallos |
Nota: El tamaño de la base de datos, el TPS (Transacciones por Segundo) y el recuento de tablas por sí solos no son predictores fiables del consumo de recursos. Recopile los bytes de redo/log de origen, las características de la transacción, los bytes de pista capturados y el tráfico transmitido por separado. Para los orígenes de Oracle, valide las medidas de redo con el DBA y evite contar copias de archive log o threads de RAC duplicados más de una vez.
Flujo de trabajo de tamaño inicial
-
Mida la carga de trabajo de origen.
- Recopile el ratio de generación de redo.
- Comprender las características de las transacciones.
- Identifique el recuento de origen y destino.
-
Seleccione un perfil de carga de trabajo.
- Utilice la tabla Niveles de Clasificación de Carga de Trabajo para identificar los casos de prueba necesarios.
-
Cree recursos de replicación de datos.
- Seleccione las OCPU base y la escala automática. Confirme el límite de nube, región, creación y almacenamiento.
-
Configure GoldenGate.
- Configure los procesos Extraer, Ruta de distribución y Replicat soportados.
-
Establezca una base de supervisión.
- Capture las OCPU consumidas, la memoria, la demora de los procesos y el crecimiento de la pista desde el primer día.
-
Validar tamaño.
- Ejecute cargas de trabajo normales y continuas de carga máxima, inicial y de recuperación ante interrupciones.
-
Ajuste los recursos según sea necesario.
- Cambie la configuración del recurso limitante o del proceso admitido y repita la prueba.
Tamaño de recursos informáticos y de almacenamiento
OCI GoldenGate asigna recursos a despliegues gestionados. En la siguiente tabla, se resumen las configuraciones básicas de ejemplo y el modelo de asignación documentado. Los valores de desarrollo y producción son orientación de planificación inicial. Los valores más grandes son ejemplos de configuración en lugar de recomendaciones de nivel de carga de trabajo.
Filosofía de dimensionamiento:
- Comience con la línea base del servicio y los requisitos de proceso simultáneos y, a continuación, valide la demanda real.
- Proporcione margen para picos, transacciones grandes, mantenimiento y puesta al día mientras continúan los cambios de origen.
- Ajuste el tamaño de cada despliegue de forma independiente y retenga planes de capacidad de bases de datos de origen y de destino independientes.
| Recurso | Desarrollo/Prueba | Inicio de producción | Ejemplo más grande | Base máxima |
|---|---|---|---|---|
| OCPU base | 1 | 4 | 8 | 24 |
| Asignación de memoria base | 16 GB | 64 GB | 128 GB | 384 GB |
| Asignación de red base | 1 Gbps | 4 Gbps | 8 Gbps | 24 Gbps |
| Almacenamiento (Pistas, otros archivos) | 500 GB | 2 TB | 4 TB | 12 TB |
Orientación de OCPU
- Oracle recomienda empezar por 1 OCPU para desarrollo/prueba y 4 OCPU para producción. Active la escala automática si es necesario para gestionar las cargas de trabajo máximas. También puede escalar o reducir verticalmente los despliegues manualmente.
- La escala automática puede utilizar hasta tres veces las OCPU base, limitadas a 24 OCPU. Pruebe la demanda sostenida y la recuperación en la configuración seleccionada.
- Comience con 1 OCPU para cada ruta simultánea de extracción, replicación o distribución como guía de planificación de procesos. Ajuste el recuento de OCPU durante las pruebas.
- La demanda de CPU de extracción varía según los cambios capturados, las características de la transacción, el filtrado, las transformaciones y la minería de origen.
- Oracle también recomienda asignar 1 OCPU para la interfaz de usuario.
Guía de memoria
- La asignación de servicios es de 16 GB de memoria por OCPU. Valide la presión de la memoria junto con la demanda de espacio temporal y recursos informáticos consumidos.
- Los requisitos de memoria dependen de datos transaccionales sin confirmar, transacciones de larga ejecución, LOB, procesos simultáneos y actividad de vertido. Proporcionar espacio para la cabeza hasta que las pruebas representativas establezcan la demanda.
- Por defecto, cada manejador de Big Data suele utilizar 8 GB de memoria. Asegúrese de que la configuración de pila
jvm.bootoptions(-Xmxy-Xms) tenga el tamaño adecuado para evitar erroresOutOfMemoryen la carga máxima. CACHEMGRse autoconfigura internamente y se autoajusta. Conserve los valores por defecto y consulte a los Servicios de Soporte Oracle antes de cambiar los controles de tamaño de caché.- Integrated Extract utiliza el servidor de logmining de la base de datos origen y el pool de flujos. El aumento de las OCPU del servicio no aumenta la capacidad de SGA de origen.
- Database Parallel Replicat utiliza asignadores, un maestro y aplicadores. Evaluar la memoria de la base de datos de destino y del proceso en lugar de aplicar una estimación genérica de pila por thread de JVM.
Guía de almacenamiento y E/S
- El almacenamiento y la implementación del sistema de archivos se gestionan mediante servicios. Los clientes planifican la capacidad de retención y recuperación en lugar de seleccionar tipos de disco, puntos de montaje o IOPS.
- Cuente cada copia de pista física dentro de cada despliegue y reserve espacio para informes, desechar archivos, vertido temporal, archivos operativos y requisitos relacionados con la copia de seguridad, cuando corresponda.
- Tenga en cuenta que las pistas de carga iniciales tienden a consumir más espacio de almacenamiento que las pistas normales.
Política de retención de pista
Basar la retención de la pista en los objetivos de recuperación de negocio, los procedimientos operativos y la duración máxima de interrupción esperada de los sistemas descendentes. La ventana requerida también debe cubrir el reinicio, la puesta al día, la respuesta del operador y cualquier requisito de reproducción adicional.
Ejemplo de destinos de retención iniciales:
| Tipo de despliegue | Retención de pista recomendada |
|---|---|
| Desarrollo / QA | 4-8 horas |
| Producción (destino único) | 24 horas |
| Producción (cargas de trabajo críticas) | 48-72 horas |
| Despliegues entre regiones/WAN | 72en más de horas |
- Mantenga activada la protección de punto de control para las pistas activas y valide todos los consumidores de Extract, Distribution, Receiver y Replicat.
- Una tarea de depuración suprime los archivos elegibles.
- Confirme la retención del log de origen y la retención de la pista para que la captura se pueda reiniciar en la posición necesaria.
Estos son ejemplos de destinos iniciales. La ventana seleccionada debe cubrir el procedimiento de recuperación real y ajustarse al límite de almacenamiento de despliegue confirmado.
Cálculo de almacenamiento de pista
Al ajustar el tamaño del almacenamiento de pista, tenga en cuenta lo siguiente:
- Ratio máximo de generación de pista x período de retención x factor de seguridad
- Oracle recomienda aplicar un factor de seguridad mínimo de al menos 1.5x para adaptarse a picos de carga de trabajo, ventanas de mantenimiento e interrupciones inesperadas del destino.
- No depure los archivos de pista basándose únicamente en la antigüedad. Depure los archivos solo después de que todos los procesos de Replicat descendentes hayan procesado correctamente los datos de pista necesarios y sus posiciones de punto de control hayan avanzado más allá de los archivos que planea eliminar.
- Para los entornos críticos para el negocio, la retención debe ser suficiente para permitir la recuperación de las actividades de mantenimiento planificadas, las interrupciones de la base de datos de destino, las interrupciones de la red y las investigaciones de solución de problemas sin necesidad de cambiar la posición o volver a instanciar los sistemas de destino mediante Extract.
Utilice esta fórmula:
Required Trail Storage = Peak Trail GB/hour x Retention Hours x Safety Factor
Ejemplo: 100 GB/hora x 24 horas x 1,5 = 3.600 GB (3,6 TB)
El factor de seguridad es una base de planificación, no una regla de asignación de servicios gestionados. Utilice bytes medidos de generación de pista para cada copia de pista local, agregue la reserva sin pista e incluya la interrupción completa, el reinicio, la puesta al día y el intervalo de respuesta sin contar los mismos datos dos veces.
Nota: En el ejemplo se ilustra el cálculo y no se trata de una recomendación de capacidad de despliegue único. Valide la retención y la partición de la carga de trabajo con respecto a la capacidad confirmada de cada despliegue.
GoldenGate recomendaciones de recuento de procesos
En la siguiente tabla se proporcionan recuentos de procesos recomendados por despliegue de replicación de datos GoldenGate de OCI para cada nivel de carga de trabajo. Estos recuentos asumen un patrón de despliegue de varios destinos de origen único. Para configuraciones de varios orígenes, multiplique el recuento de Extract por el número de bases de datos de origen y ajuste el recuento de OCPU según corresponda.
| Proceso de GG | Pequeño | Media | Grande | Muy grande |
|---|---|---|---|---|
| Extraer (integrado) | 1 | 1-2 | 1-2 | 2-4 |
| Rutas de distribución | 1-2 | 2-4 | 4-8 | 8-16 |
| Replicat (clásico) | 1-2 | 2-5 | 5-15 | 15-30 |
| Replicat (paralelo) | 1 | 1-2 | 2-4 | 4-8 |
| Replicat (coordinado) | 1-2 | 2-5 | 5-10 | 10 – 0 |
| Máximo de procesos simultáneos | 2-4 | 8-14 | 16-34 | 36-70 |
Para varios orígenes, tenga en cuenta cada ámbito de captura soportado y ajuste los recursos informáticos según corresponda. Aplique la consola y la asignación de proceso simultáneo en la orientación de OCPU y, a continuación, valide la memoria, la capacidad de destino y la demanda máxima. Particione la carga de trabajo en los despliegues cuando un despliegue no pueda cumplir los requisitos probados.
Directrices de proceso de extracción
- Comience con un Extract integrado por ámbito de captura de origen soportado. Para los orígenes de CDB/PDB, utilice la configuración de captura soportada por la compilación de despliegue y la base de datos seleccionadas.
- Introduzca extracciones adicionales solo para una partición de carga de trabajo válida o un cuello de botella de captura medido. Pruebe la sobrecarga de minería, los recursos de la base de datos de origen, la consistencia de las transacciones y la recuperación.
- Una única extracción puede escribir en varios archivos de pista. Esto permite que un solo Extract alimente varios destinos o divida una gran carga de trabajo en varias pistas que pueden procesar varios Replicats.
- Confirme las restricciones de la plataforma antes de utilizar varias pistas; por ejemplo, Extract MySQL con posicionamiento de juego de GTID solo admite una pista.
Directrices del servicio de distribución
- Un único servicio de distribución puede mantener varias rutas simultáneas. Configure una ruta para cada ruta de transferencia de pista necesaria y contabilice el tráfico de salida y cada consumidor descendente.
- Para la distribución WAN, revise la configuración de buffer de ruta de acceso admitida y vaciado de TCP para compensar la latencia de red. Cambiar la configuración solo después de probar la ruta demuestra la restricción.
Directrices del proceso de replicación
- Seleccione el Replicat adecuado para su carga de trabajo. Por ejemplo, consulte Tipos de Replicat para bases de datos Oracle.
- Oracle recomienda Parallel Non-Integrated Replicat para bases de datos Oracle y Parallel Replicat para todas las demás plataformas GoldenGate que lo soportan.
- Classic Replicat se aplica en serie y se adapta a escenarios de desarrollo, recuperación ante desastres de carga de trabajo ligera y destinos que no sean de Oracle y que carecen de soporte de aplicación en paralelo.
- Un coordinador gestiona los varios threads de aplicación de Coordinated Replicat, lo que hace que este Replicat sea adecuado para cargas de trabajo OLTP estructuradas que requieren seguimiento de dependencias.
- Asigne un grupo de replicación por esquema de destino o partición de carga de trabajo lógica para maximizar el paralelismo y aislar los dominios de fallo.
Consideración de OCPU
- Parallel Replicat generalmente requiere recursos de OCPU adicionales a medida que aumenta el paralelismo.
- Integrated Replicat realiza una aplicación paralela dentro de la Oracle Database de destino, por lo que incluye los recursos de la base de datos de destino en la planificación de capacidad.
Guía de topología de recuperación ante desastres
OCI GoldenGate opera la infraestructura de servicios. Seleccione una topología de recuperación gestionada según los objetivos de recuperación de negocio y la disponibilidad de funciones en la nube y la región elegidas. La base de datos, la red, la replicación y la recuperación de aplicaciones siguen formando parte del diseño completo.
Despliegue único
- Adecuado como despliegue inicial para desarrollo, control de calidad, pilotos y cargas de trabajo con procedimientos de recuperación que cumplen los objetivos acordados.
- Configure los controles de inicio y reinicio automáticos de procesos admitidos y pruebe su comportamiento.
- Utilizar copias de seguridad de despliegue de servicios y retención de pistas protegidas por puntos de control. Incluya la recuperación de la base de datos de origen y destino en el libro de ejecución.
Despliegues principales y de pares
- Puede crear peers locales o entre regiones para aumentar la disponibilidad y minimizar el tiempo de inactividad durante el mantenimiento planificado y las interrupciones no planificadas.
- Un despliegue primario puede tener un despliegue de peer. La base de datos en espera siempre tiene el mismo tamaño que la primaria.
- Ejecute comprobaciones previas de pares y ejercicios de recuperación. RPO (objetivo de punto de recuperación) es cero. El RTO (objetivo de tiempo de recuperación) depende de la cantidad de datos almacenados en el despliegue. Cuanto mayor sea el uso del almacenamiento, mayor será el RTO.
- Para la recuperación entre regiones, valide los puntos finales de la ruta de distribución, los certificados del almacén de confianza, la replicación de secretos, el enrutamiento de conexiones y el inicio de procesos. Consulte Gestión de despliegues de peer para obtener más información.
Copias de seguridad y mantenimiento del despliegue
- El servicio conserva las copias de seguridad automáticas diarias durante 12 días y las copias de seguridad manuales hasta que las suprime. El contenido de la copia de seguridad puede incluir sólo metadatos o metadatos y pistas. Consulte Gestión de copias de seguridad de despliegue para obtener más información.
- Una copia de seguridad de despliegue no sustituye las copias de seguridad de la base de datos de origen y destino ni la retención de la pista activa necesaria. Pruebe la secuencia de restauración en un punto de recuperación consistente.
- Planifique la parada/reinicio y los atrasos asociados a los cambios de versión del despliegue. Revise los problemas conocidos y la información de mantenimiento específica del despliegue.
Base de supervisión y métricas
Establecer una línea base de supervisión desde el primer día. Realice un seguimiento continuo del consumo de servicios, el rendimiento de los procesos, los recursos de la base de datos y la ruta completa de origen a destino para los despliegues de producción.
Métricas de OCI Monitoring
- Extracts: demora de captura y estado de proceso.
- Rutas de distribución y receptor: demora y estado.
- Replicats: aplicar demora y estado de proceso.
- Despliegues: uso de OCPU, consumo de OCPU, uso de memoria y almacenamiento.
- Aplicación: retraso de latidos.
Puede revisar la lista completa de métricas disponibles en Métricas de replicación de datos.
Configure alarmas en OCI Monitoring para detectar fallos en los procesos, infracciones de frescura, progreso detenido y previsión del agotamiento del almacenamiento. Los umbrales deben permitir tiempo para la respuesta del operador. El servicio OCI Notifications ofrece estas alarmas.
Criterios de validación de tamaño inicial
Después del despliegue y de realizar pruebas representativas de la carga de trabajo, valide el tamaño con respecto a los objetivos de la aplicación. Defina los umbrales de demora, recursos y puesta al día numéricos para cada carga de trabajo en lugar de tratarlos como límites del servicio universal.
Un despliegue de tamaño adecuado debe mostrar:
- Frescura integral y retraso por proceso dentro del objetivo acordado durante el pico de demanda normal y sostenido.
- Sin crecimiento persistente de atrasos de pista y suficiente espacio retenido durante la interrupción y recuperación planificadas.
- Comportamiento de memoria y espacio temporal que permanece estable a través de transacciones grandes y actividad simultánea.
- No hay errores de datos inexplicables, reinicios de procesos recurrentes o finalizaciones anormales relacionadas con recursos.
- Recuperación de atrasos dentro de la fecha límite acordada mientras continúan los nuevos cambios de origen.
- Pruebas de reinicio, copia de seguridad/restauración y recuperación de pares correctas, cuando corresponda.
Incluya la superposición de carga inicial, las copias de seguridad, el mantenimiento y el crecimiento de las previsiones en la prueba. Registra las tasas logradas, el peor retraso, el almacenamiento retenido, el tiempo de recuperación, los resultados de coherencia y las condiciones que requieren un nuevo ejercicio de dimensionamiento.
Lista de comprobación de aprovisionamiento previo
Complete la siguiente lista de comprobación antes de aprovisionar el despliegue inicial de OCI GoldenGate. La recopilación de esta información por adelantado reduce los retrasos en el despliegue y el cambio de tamaño posterior al despliegue.
- Recopile el ratio máximo y medio de generación de redo logs de la base de datos de origen (por hora, por día).
- Identifique las tablas replicadas, los tamaños de fila, los LOB, las transacciones más grandes, el filtrado y las transformaciones.
- Determinar los recuentos de origen y destino, la ubicación de la implementación y las rutas LAN / WAN / entre nubes.
- Confirme las combinaciones de puntos finales soportadas y la tecnología de despliegue.
- Confirme el SLA de latencia (requisito de frescura de datos) con el propietario de la aplicación.
- Seleccione las OCPU base y la escala automática; consolas de registro y permisos de procesos simultáneos.
- Ajuste el tamaño de cada copia de pista retenida, atrasos de recuperación, reserva no de pista y política de depuración protegida por punto de control.
- Validar el rendimiento medido del cable y la latencia de la ruta durante la demanda normal, máxima y de recuperación.
- Mida el impacto del registro complementario y valide la capacidad de minería de origen y aplicación de destino.
- Defina los privilegios de origen/destino, las credenciales, las políticas de acceso, el DNS, el enrutamiento y los puertos de listener necesarios.
- Seleccione una topología de recuperación y confirme la disponibilidad de peer, copia de seguridad y creación en la nube seleccionada.
- Planifique la carga inicial y un límite de sincronización consistente. Retener logs/pistas mediante la puesta al día.
- Establezca criterios de supervisión, alarmas, propiedad del operador y aceptación de pruebas representativas.
Exención de responsabilidad
Estas recomendaciones basadas en Oracle se basan en patrones de despliegue comunes y pruebas internas. Los requisitos reales de los recursos pueden variar en función de las características de la carga de trabajo, incluida la complejidad de las transacciones, la combinación de DML/DDL, la latencia de red, el rendimiento de la base de datos de destino y la configuración de registro complementaria.
Estas recomendaciones reflejan características de despliegue comunes en los entornos de cliente de Oracle GoldenGate y la experiencia de ingeniería interna de Oracle. Tienen la intención de proporcionar un punto de partida práctico para la planificación de la capacidad en lugar de sustituir la validación del rendimiento específica de la carga de trabajo.
Oracle Corporation y sus filiales no ofrecen garantías, ni explícitas ni implícitas, sobre la exactitud, integridad o idoneidad de estas recomendaciones para un entorno específico. Los clientes son responsables de validar todas las recomendaciones y determinar el tamaño de la orientación con respecto a sus propias cargas de trabajo de producción antes de la puesta en marcha.