Creación de un pipeline de flujo de archivos

Aprenda a crear un pipeline sencillo en Stream Analytics usando un archivo, como CSV o JSON, para realizar prototipos rápidamente, hacer pruebas o desarrollar pruebas de concepto de casos de uso.

Temas relacionados

Tarea 1: Creación del despliegue de Stream Analytics

Para crear un despliegue de Stream Analytics:
  1. En el menú de navegación Consola, haga clic en Oracle Database y, a continuación, seleccione GoldenGate.
  2. En la página Despliegues, haga clic en Creación de despliegue.
  3. En el panel Crear Despliegue, introduzca un nombre y, opcionalmente, una descripción.
  4. En la lista desplegable Compartment, seleccione el compartimento en que desea crear el despliegue.
  5. Seleccione Análisis de flujo para el tipo de despliegue.
  6. El tipo de tecnología de análisis de flujo se selecciona automáticamente.
  7. En Versión, la última versión se selecciona automáticamente. Haga clic en Cambiar versión para seleccionar otra versión.

    Note:

    Obtenga más información sobre las versiones.
  8. Seleccione una de las opciones siguientes:
    • Desarrollo o prueba: configura un despliegue con los valores por defecto recomendados para un entorno de prueba o desarrollo. El número mínimo de OCPU es 1.
    • Producción: configura un despliegue con el valor por defecto recomendado de 4 OCPU con la escala automática activada para un entorno de producción. El número mínimo de OCPU necesarias es 3, con la escala automática activada.
  9. En Seleccionar OCPU, introduzca el número o haga clic en Cambiar unidad para utilizar el control deslizante para seleccionar el número de unidades de recursos informáticos de Oracle (OCPU) que desea utilizar.
  10. (Opcional) Seleccione Escala automática.

    Note:

    La escala automática permite a OCI GoldenGate escalar hasta tres veces el número de OCPU que especifique para la cantidad de OCPU, hasta 24 OCPU. Por ejemplo, si especifica un recuento de OCPU 2 y activa la escala automática, su despliegue se puede ampliar hasta 6 OCPU. Si especifica un recuento de OCPU 20 y activa la escala automática, OCI GoldenGate solo se puede ampliar hasta 24 OCPU.
  11. En la lista desplegable Subred en <Compartimento>, seleccione la subred en las que se crea un punto final privado desde el arrendamiento de servicio OCI GoldenGate. Esto garantiza que el despliegue siempre esté disponible a través de esta subred, siempre que las políticas para esta subred permitan el acceso.

    Para seleccionar una subred de otro compartimento, haga clic en Cambiar compartimento,

    Note:

    Solo puede seleccionar una subred privada al crear o actualizar un despliegue.
  12. Seleccione un tipo de licencia.
  13. En GoldenGate nombre de instancia, introduzca un nombre para la instancia de análisis de flujo.
  14. Para el almacén de credenciales, seleccione una de las siguientes opciones:
    • OCI Identity and Access Management (OCI IAM), para permitir a los usuarios conectarse a la consola de despliegue mediante su cuenta de Oracle Cloud (conexión única) en arrendamientos activados de IAM (Identity and Access Management).

      Note:

      • Una vez que seleccione IAM, no podrá cambiar a GoldenGate cuando edite la configuración de despliegue más tarde.
      • Esta opción se prefiere para un despliegue de Db2 para i, a fin de evitar problemas con el inicio de sesión y las rutas de distribución.
      1. (Opcional: solo se aplica a despliegues de replicación de datos) Seleccione Personalizar asignaciones de grupo a rol para asignar grupos de usuarios a roles GoldenGate específicos. Como mínimo, debe asignar el grupo de roles de seguridad a un grupo de usuarios. Obtenga más información sobre los roles y privilegios de usuario de Oracle GoldenGate.
    • GoldenGate, para que GoldenGate gestione usuarios.
      1. Introduzca el usuario del administrador.
      2. Seleccione un secreto de contraseña en el compartimento o haga clic en Cambiar compartimento para seleccionar uno en un compartimento diferente. También puede crear un nuevo secreto de contraseña.

        Para crear un nuevo secreto de contraseña:

        1. Haga clic en Crear secreto de contraseña.
        2. En el panel Crear secreto, introduzca un nombre para el secreto y, opcionalmente, una descripción.
        3. Seleccione un compartimento en la lista desplegable Compartimento en el que guardar el secreto.
        4. Seleccione un almacén en el compartimento actual o haga clic en Cambiar compartimento para seleccionar un almacén en un compartimento diferente.
        5. Seleccione una clave de cifrado.

          Note:

          Solo se admiten claves AES, claves protegidas por software y claves HSM. Las claves RSA y ECDSA no se admiten para las claves secretas de contraseña GoldenGate.
        6. Introduzca una contraseña de 8 a 30 caracteres de longitud que contenga al menos 1 carácter mayúscula, 1 carácter minúscula, 1 carácter numérico y 1 carácter especial. Los caracteres especiales no deben ser "$", "^" ni "?".
        7. Confirme la contraseña.
        8. Haga clic en Create.

      Note:

      Puede gestionar usuarios de GoldenGate en la consola de despliegue. Más información.
  15. (Opcional) Haga clic en Mostrar opciones avanzadas para las opciones de la red y agregar etiquetas.
    1. En el separador Red,
      1. Seleccione Activar acceso público a la consola GoldenGate para incluir un punto final público además de un punto final privado y permitir el acceso público a la consola de despliegue para los usuarios. Si se selecciona, OCI GoldenGate crea un equilibrador de carga en su arrendamiento para crear una IP pública. Seleccione una subred pública en la misma VCN que este despliegue en el que crear el equilibrador de carga.

        Note:

        El equilibrador de carga es un recurso que tiene un costo adicional. Puede gestionar este recurso, pero asegúrese de no suprimir el equilibrador de carga mientras el despliegue sigue en uso. Obtenga más información sobre los precios del equilibrador de carga.

      2. Seleccione Personalizar punto de acceso para proporcionar un prefijo del nombre del dominio completo (FQDN) privado que utilizará para acceder a las URL de la consola del servicio privado. También puede cargar un certificado SSL/TLS (.pem) y su clave privada correspondiente; sin embargo, los certificados protegidos por contraseña no están soportados.

        • Es su responsabilidad asegurarse de que el FQDN se resuelva en la dirección IP privada del despliegue en la subred que ha seleccionado anteriormente.
        • Si el despliegue es público, es su responsabilidad asegurarse de que el FQDN se resuelva públicamente en la dirección IP pública del despliegue.

        Los servicios utilizan su propio certificado, si no proporciona uno, y puede que aparezca una advertencia de seguridad al iniciar la consola de despliegue.

        Note:

        El certificado SSL debe cumplir los siguientes requisitos:
        • Su nombre común debe coincidir con el FQDN del despliegue. Si no lo hace, encontrará advertencias al acceder a la consola de despliegue.
        • Se debe firmar mediante un algoritmo hash fuerte. arcfour, arcfour128, arcfour256, no se permite ningún tipo de algoritmo.
        • No debe caducar.
        • Su validez máxima no debe exceder los 13 meses.
        • No debe ser un certificado autofirmado.
        Si encuentra errores de "Clave privada no válida", puede comprobar la corrección de la clave mediante los siguientes comandos OpenSSL. Ejecute este comando en el certificado:
        openssl x509 --noout --modulus --in <cert>.pem |openssl md5

        A continuación, ejecute este comando en la clave privada:

        openssl rsa --noout --modulus --in <key>.pem |openssl md5

        La salida de los dos comandos debe devolver el mismo valor md5. Si no lo hace, el certificado y la clave privada no coinciden.

    2. En la sección Mantenimiento:
      1. Seleccione Personalizar ventana de mantenimiento para definir el inicio de la ventana de mantenimiento para actualizar el despliegue.
      2. (Opcional) En Período de actualización automática de versión principal en días, introduzca el número de días, entre 0 y 365.
      3. (Opcional) Para el período de actualización automática de la versión del paquete en días, introduzca el número de días, entre 0 y 180 días.
      4. (Opcional) En Período de actualización automática de parches de seguridad en días, introduzca el número de días, entre 0 y 14 días.
      5. Seleccione Activar cambio de versión automático de versión secundaria y, opcionalmente, introduzca el número de días.

      Note:

      Obtenga más información sobre la programación de actualizaciones.
    3. En la sección Programa de copia de seguridad:
      1. Seleccione Configurar programa de copia de seguridad.
      2. Seleccione la fecha y la hora para empezar a crear copias de seguridad.
      3. Seleccione la frecuencia para crear copias de seguridad, ya sea diaria, semanal o mensual.
      4. Seleccione Solo metadatos de copia de seguridad para crear copias de seguridad sin archivos de pista.
      5. Seleccione el compartimento en que desea crear copias de seguridad.
      6. Seleccione el compartimento y el cubo de almacenamiento de objetos en el que desea guardar las copias de seguridad.
    4. En la sección Etiquetas, agregue etiquetas para ayudar a realizar un seguimiento de los recursos dentro de su arrendamiento. Haga clic en + Etiqueta adicional para agregar más etiquetas. Más información sobre etiquetado.
  16. Haga clic en Crear para crear el despliegue o haga clic en Guardar como pila para guardar esta configuración en Resource Manager.

    Si selecciona Guardar como pila, se abre el panel Guardar como pila, donde puede proporcionar opcionalmente un nombre y una descripción para la pila y seleccionar el compartimento en el que desea guardarla. Obtenga más información sobre Resource Manager.

Tarea 2: Crear y publicar el pipeline

  1. Inicie el pipeline de Stream Analytics.
    1. En la página de detalles de despliegue de Stream Analytics, haga clic en Iniciar consola.
    2. Conéctese a la consola de despliegue de Stream Analytics mediante el nombre de usuario y la contraseña de administrador especificados al crear el despliegue en la tarea 1, pasos 14 y 15.
  2. En la consola de despliegue de Stream Analytics, haga clic en Catálogo.
  3. Creación de un flujo de archivos.
  4. Cree un pipeline mediante el flujo de archivos creado en el paso 3.
    Obtenga más información sobre el editor de pipeline. A continuación, se muestran algunas acciones que puede realizar en el pipeline de flujo de archivos:
  5. Publicar el pipeline.