Replicación de datos de Autonomous AI Transaction Processing en Azure Synapse Analytics

Este inicio rápido muestra cómo configurar una replicación de datos de Autonomous AI Transaction Processing en Azure Synapse Analytics mediante OCI GoldenGate.

Antes de empezar

Para completar correctamente este inicio rápido, debe tener lo siguiente:

Configuración del entorno: procesamiento de transacciones de IA autónoma

Si aún no tiene una base de datos de origen configurada para la replicación, puede seguir estos pasos para cargar un esquema de ejemplo que utilizar para este inicio rápido. Este inicio rápido utiliza el procesamiento de transacciones de IA autónoma para la base de datos de origen.

Para configurar el procesamiento de transacciones de IA autónoma de origen:

  1. Descargue y descomprima el esquema de base de datos de ejemplo.

  2. En la consola de Oracle Cloud, seleccione su instancia de procesamiento de transacciones de IA autónoma (ATP) en la página Bases de datos de IA autónomas para ver los detalles y acceder a Database Actions.

  3. Desbloquee el usuario de GGADMIN:

    1. Seleccione Acciones de base de datos y, a continuación, Usuarios de base de datos.

    2. Localice GGADMIN y, a continuación, seleccione el menú de puntos suspensivos (tres puntos) y seleccione Editar.

    3. En el panel Editar usuario, introduzca la contraseña de GGADMIN, confirme la contraseña y, a continuación, anule la selección de Cuenta bloqueada.

    4. Seleccione Apply Changes (Aplicar cambios).

  4. Cargue el esquema de ejemplo y datos del origen:

    1. En el menú Acciones de base de Datos, en Desarrollo, seleccione SQL.

    2. Copie y pegue el script de OCIGGLL_OCIGGS_SETUP_USERS_ATP.sql en la hoja de Trabajo de SQL.

    3. Seleccione Run Script. El separador Salida de script mostrará los mensajes de confirmación.

    4. Borre la hoja de trabajo SQL y, luego, copie y pegue el script SQL de OCIGGLL_OCIGGS_SRC_USER_SEED_DATA.sql.

      Consejo: puede que necesite ejecutar cada sentencia por separado para que la herramienta SQL ejecute los scripts correctamente.

    5. Para verificar que las tablas se han creado correctamente, cierre la ventana SQL y vuelva a abrirla. En el separador Navegador, busque el esquema SRC_OCIGGLL y, a continuación, seleccione la tabla en sus respectivas listas desplegables.

  5. Active el registro complementario:

    1. Borre la hoja de trabajo de SQL.

    2. Introduzca la siguiente sentencia y, a continuación, seleccione Ejecutar sentencia:

      ALTER PLUGGABLE DATABASE ADD SUPPLEMENTAL LOG DATA;

Configuración del entorno: Azure Synapse Analytics

  1. Abra el espacio de trabajo de Azure Synapse Analytics.

  2. Seleccione Nuevo y, a continuación, Script SQL.

  3. Conéctese al pool SQL y seleccione la base de datos.

  4. Introduzca el siguiente comando para crear un cifrado de clave maestra:

    CREATE MASTER KEY ENCRYPTION BY PASSWORD='<password>';
  5. Utilice el siguiente comando para crear la credencial de ámbito de base de datos:

    Asegúrese de sustituir los marcadores de posición <storage-account-name> y <storage-account-access-key> por sus valores reales.

    CREATE DATABASE SCOPED CREDENTIAL <credential name>
    WITH
    IDENTITY='<storage-account-name>',
    SECRET='<storage-account-access-key>';
  6. Ejecute el script de creación de tabla:

    CREATE TABLE [dbo].[SRC_CUSTOMER] (
       CUSTID         NUMERIC(10) NOTNULL,
       DEAR           NUMERIC(1),
       LAST_NAME      VARCHAR(50),
       FIRST_NAME     VARCHAR(50),
       ADDRESS        VARCHAR(100),
       CITY_ID        NUMERIC(10),
       PHONE          VARCHAR(50),
       AGE            NUMERIC(3),
       SALES_PERS_ID  NUMERIC(10),
       constraint PK_SRC_CUSTOMER primarykeyNONCLUSTERED (CUSTID) NOT ENFORCED
    )
    WITH(DISTRIBUTION=HASH ([CUSTID]), HEAP ) GO
  7. Verifique que se ha creado la tabla dbo.SRC_Customer.

Tarea 1: Creación de recursos de OCI GoldenGate

En este ejemplo de inicio rápido se necesitan despliegues y conexiones tanto para el origen como para el destino.

  1. Cree un despliegue de Oracle para la instancia de Autonomous AI Transaction Processing del origen.

  2. Cree un despliegue de Big Data para el análisis de Azure Synapse de destino.

  3. Cree una conexión al procesamiento de transacciones de IA autónoma de origen.

  4. Creación de una conexión a Azure Synapse Analytics.

  5. Cree una conexión de Azure Data Lake Storage.

  6. Asigne la conexión de Autonomous AI Transaction Processing al despliegue de Oracle de origen.

  7. Asigne la conexión de Azure Synapse Analytics al despliegue de Big Data de destino.

Tarea 2: Adición del Extract

  1. En la página Despliegues, seleccione el despliegue de Autonomous AI Transaction Processing de origen.

  2. En la página de detalles del despliegue, seleccione Iniciar consola.

  3. Conéctese con el nombre de usuario y la contraseña del administrador del despliegue de origen.

  4. Agregue un Extract.

Tarea 3: Adición y ejecución de la ruta de distribución

  1. Si utiliza el almacén de credenciales de GoldenGate, cree un usuario para la ruta de distribución en el despliegue de Big Data del destino; de lo contrario, vaya al paso 3.

  2. En la consola de despliegue de GoldenGate de origen, agregue una conexión de ruta de acceso para el usuario creado en el paso 1.

    1. En la consola de despliegue de GoldenGate de origen, seleccione Conexiones de ruta en la navegación izquierda.

    2. Seleccione Agregar conexión de ruta de acceso (icono más) y, a continuación, complete lo siguiente:

      1. En Alias de credencial, introduzca GGSNetwork.

      2. En User ID (ID de usuario), introduzca el nombre del usuario creado en 1.

      3. Introduzca la contraseña del usuario dos veces para su verificación.

    3. Seleccione Enviar.

      La conexión de ruta de acceso aparece en la lista Conexiones de ruta.

  3. En la consola de despliegue del origen, agregue una ruta de distribución con los siguientes valores:

    1. En la página Opciones de origen:

      • En Extract de origen, seleccione el Extract creado en el tarea 2.

      • En Nombre de la pista, introduzca un Nombre de dos caracteres como E1.

    2. En la página Opciones de destino:

      • En Host de destino, introduzca el dominio de host del despliegue del destino.

      • En Número de puerto, introduzca 443.

      • En Nombre de la pista, introduzca un Nombre de dos caracteres como E1.

      • En Alias, introduzca el alias de credencial creado en la etapa 2.

  4. En la consola de despliegue de Big Data de destino, revise la Ruta de receptor creada como resultado de la Ruta de distribución.

    1. En la consola de despliegue de Big Data de destino, seleccione Servicio de receptor.

    2. Revise los detalles de la ruta. Esta ruta se ha creado como resultado de la Ruta de distribución creada en el paso anterior.

Tarea 4: Adición y ejecución del Replicat

  1. En la consola de despliegue de Big Data de destino, seleccione Replicats y, a continuación, seleccione Agregar Replicat (icono más).

  2. Agregar un Replicat con los siguientes valores:

    1. En la página Información de Replicat, en Tipo de Replicat, seleccione Replicat clásico, introduzca un nombre de proceso y, a continuación, seleccione Siguiente.

    2. En la página Opciones de Replicación:

      • En Nombre, introduzca el nombre de una pista en la tarea 2.

      • Para Dominio, seleccione un dominio.

      • En Alias, seleccione la conexión de Synapse Analytics de Azure creada en el tarea 1.

      • En Tabla de puntos de Control, seleccione la tabla del punto de control que ha creado para el despliegue.

    3. En la página Parámetros de Replicat, sustituya MAP *.*, TARGET *.*; por:

      MAP SRC_OCIGGLL.SRC_CUSTOMER, TARGET dbo.SRC_CUSTOMER;
    4. En la página Propiedades de Replicat, configure las propiedades de Azure Synapse Analytics:

      Nota: Edite las propiedades marcadas como TODO.

      • gg.eventhandler.abs.bucketMappingTemplate es el contenedor de almacenamiento de Azure asociado al espacio de trabajo de Azure Synapse Analytics

      • gg.eventhandler.synapse.credential es el nombre de la credencial utilizada para autenticar el contenedor de almacenamiento de Azure asociado al espacio de trabajo de análisis de Azure Synapse

  3. Seleccione Crear y ejecutar.

Volverá a la página Visión general, donde podrá revisar los detalles del Replicat.

Tarea 5: Verificación de la replicación

Realice algunas actualizaciones en la instancia de procesamiento de transacciones de IA autónoma de origen para verificar la replicación en Azure Data Lake Storage.

  1. En la consola de Oracle Cloud, abra el menú de navegación, seleccione Oracle AI Database y, a continuación, seleccione Procesamiento de transacciones de IA autónoma.

  2. En la lista de instancias de Autonomous AI Transaction Processing, seleccione la instancia de origen para ver los detalles.

  3. En la página de detalles de la base de datos, seleccione Database Actions.

    Nota: Esta acción le debería conectar de forma automática. Si no es así, conéctese con las credenciales de la base de datos.

  4. En la página inicial de Database Actions, seleccione SQL.

  5. Introduzca lo siguiente en la hoja de trabajo y seleccione Ejecutar script.

  6. En la consola de despliegue de GoldenGate de OCI GoldenGate de origen, seleccione el nombre del Extract y, a continuación, seleccione Estadísticas. Verifique que SRC_OCIGGLL.SRC_CUSTOMER tenga 7 inserciones.

    Insert into SRC_OCIGGLL.SRC_CUSTOMER (CUSTID,DEAR,LAST_NAME,FIRST_NAME,ADDRESS,CITY_ID,PHONE,AGE,SALES_PERS_ID) values (1001,0,'Brendt','Paul','10 Jasper Blvd.',107,'(212) 555 2146',19,10);
    Insert into SRC_OCIGGLL.SRC_CUSTOMER (CUSTID,DEAR,LAST_NAME,FIRST_NAME,ADDRESS,CITY_ID,PHONE,AGE,SALES_PERS_ID) values (1002,0,'McCarthy','Robin','27 Pasadena Drive',11,'(214) 555 3075',29,11);
    Insert into SRC_OCIGGLL.SRC_CUSTOMER (CUSTID,DEAR,LAST_NAME,FIRST_NAME,ADDRESS,CITY_ID,PHONE,AGE,SALES_PERS_ID) values (1003,0,'Travis','Peter','7835 Hartford Drive',12,'(510) 555 4448',34,12);
    Insert into SRC_OCIGGLL.SRC_CUSTOMER (CUSTID,DEAR,LAST_NAME,FIRST_NAME,ADDRESS,CITY_ID,PHONE,AGE,SALES_PERS_ID) values (1004,0,'Larson','Joe','87 Carmel Blvd.',13,'(213) 555 5095',45,13);
    Insert into SRC_OCIGGLL.SRC_CUSTOMER (CUSTID,DEAR,LAST_NAME,FIRST_NAME,ADDRESS,CITY_ID,PHONE,AGE,SALES_PERS_ID) values (1005,0,'Goldschmidt','Tony','91 Torre drive',14,'(619) 555 6529',55,20);
    Insert into SRC_OCIGGLL.SRC_CUSTOMER (CUSTID,DEAR,LAST_NAME,FIRST_NAME,ADDRESS,CITY_ID,PHONE,AGE,SALES_PERS_ID) values (1006,0,'Baker','William','2890 Grant Avenue',15,'(312) 555 7040',64,21);
    Insert into SRC_OCIGGLL.SRC_CUSTOMER (CUSTID,DEAR,LAST_NAME,FIRST_NAME,ADDRESS,CITY_ID,PHONE,AGE,SALES_PERS_ID) values (1007,0,'Swenson','Jack','64 Imagination Drive',19,'(202) 555 8125',74,22)
  7. En la consola de despliegue de Big Data OCI GoldenGate de destino, seleccione el nombre del Replicat y, a continuación, seleccione Estadísticas. Verifique que SRC_OCIGGLL.SRC_CUSTOMER tenga 7 inserciones.

  8. En la consola de Azure, navegue a la consola del espacio de trabajo de Azure Synapse Analytics. Ejecute Select * en dbo.SRC_CUSTOMER y verifique que SRC_OCIGGLL.SRC_CUSTOMER tenga 7 inserciones.

Tarea 6: Supervisión y mantenimiento de procesos

  1. Supervise el proceso de replicación.

  2. Gestión de archivos de pista.