Captura de cambios de datos (vista previa)

Puede saber qué datos cambiaron en el almacén de datos autónomo asociado a la instancia de Fusion Data Intelligence durante el refrescamiento mediante el formato de cambio de tabla diseñado para capturar los cambios de datos en el proceso de refrescamiento.

Puede utilizar la información de cambio en las integraciones descendentes. Esta capacidad utiliza la función de uso compartido de datos y transfiere la información de datos cambiada a un lago de datos como Oracle Cloud Infrastructure Object Storage Service. El conector de destinos de servicio de Oracle Object Storage con el tipo FDI_TABLE_CHANGE_FORMAT permite a Fusion Data Intelligence publicar juegos de datos en el formato de datos de integración en el cubo de Oracle Cloud Infrastructure Object Storage. Después de publicar los datos de cambio en el servicio de almacenamiento de objetos de Oracle, puede leer los cambios mediante cualquier herramienta estándar para leer los archivos del almacén de objetos y realizar acciones descendentes según sea necesario.

El servicio de almacenamiento de objetos almacena los cambios en los archivos de Parquet en una estructura jerárquica para:
  • Cada origen
  • Cada tabla seleccionada para capturar cambios
  • Cada cambio (identificado por "número de cambio del sistema")
  • Cada tipo de refrescamiento
    • Completo
    • Incremental
    • Transient_refresh (para FDR V2)
  • Estas acciones
    • Insertar
    • Actualizar
    • Suprimir
Este mecanismo también captura metadatos adicionales para:
  • Refrescar finalización
  • Esquema
  • Marcadores para el último cambio y la última actualización completa

Ejemplo de datos cambiados almacenados en el servicio Object Storage

En este ejemplo, se muestran los juegos de cambios correspondientes a los números de cambio del sistema (SCN) disponibles para un juego de datos específico.
Ejemplo de los datos modificados almacenados en el servicio Object Storage