6 Relleno Automático de Catálogo
Este capítulo contiene información sobre la creación y gestión de extractores automatizados para extraer datos de los catálogos.
Acerca del relleno automático
Puede automatizar el proceso de extracción de metadatos de orígenes directamente en los catálogos de datos.
La creación manual de esquemas, tablas y particiones a partir de orígenes de datos requiere mucho tiempo y es complicada. Oracle AI Data Platform Workbench ofrece la capacidad de extraer automáticamente metadatos de orígenes de datos y crear entidades en catálogos que especifique en el extractor de metadatos.
Para rellenar automáticamente estos metadatos en el catálogo, cree un extractor de metadatos. Como parte de la creación del extractor, debe especificar el catálogo de destino al que extraer los metadatos y el origen de los mismos. Puede optar por que el extractor cree tablas en un esquema especificado o permitir que el sistema sugiera dónde se crean las tablas si no se especifica ni se detecta ningún esquema.
El relleno automático puede extraer metadatos de los siguientes tipos de archivos:
- CSV
- JSON
- Avro
- ORC
- Parquet
- Delta Lake
Note:
Al especificar la carpeta de origen al crear un extractor de metadatos, todos los archivos de la carpeta de hoja deben tener el mismo formato de datos.Note:
El relleno automático solo admite guiones bajos ( _ ) como caracteres especiales en los nombres de columna.Puede optar por revisar manualmente las entidades que se extraen o permitir que el sistema cree automáticamente las entidades a partir de los metadatos extraídos. Al extraer metadatos, las entidades que causan errores se capturan en el log. Puede ver el log para ver qué entidades han encontrado errores y realizar acciones para corregirlos.
La revisión manual de entidades permite aceptar o rechazar entidades de forma individual. Puede ver que las entidades ya se han aprobado o rechazado en el separador Entidades revisadas.
Los extractores muestran su estado para que sepa en qué etapa se encuentran actualmente y si es necesaria la intervención del usuario.
| Estado de extractor | Descripción |
|---|---|
| Sin iniciar | El extractor no ha comenzado. Inicie el extractor para comenzar. |
| En ejecución | Extractor en curso |
| Listo para revisar | El extractor se ha ejecutado y ha elegido la aprobación manual. Las entidades extraídas se deben revisar y aceptar o aprobar. |
| En revisión | El extractor se ha ejecutado y ha elegido la aprobación manual. Algunas entidades han sido revisadas o aprobadas por un usuario, pero siguen siendo entidades que requieren revisión. |
| Terminada | Se ha ejecutado el extractor y un usuario ha aprobado las entidades de forma automática o manual |
Puede ver y utilizar extractores de metadatos creados por otros usuarios si tiene los permisos necesarios.
Crear Extractor de Metadatos
Puede crear extractores de metadatos para automatizar la extracción de entidades como esquema y tablas en sus catálogos.
- En la página de inicio, haga clic en Rellenar automáticamente el catálogo.
- Haga clic en
Crear extractor de metadatos. - Introduzca un nombre para el extractor de metadatos.
- Seleccione el catálogo de destino en la lista desplegable Catálogo.
- Seleccione el tipo de origen adecuado en la lista desplegable Tipo de origen.
- Junto a Recursos informáticos, haga clic en Examinar y seleccione el cluster que debe utilizar el extractor. Haga clic en Seleccionar.
- En URI de Object Storage, seleccione si desea examinar los compartimentos del cubo o carpeta al que desea extraer los metadatos o si desea especificar el URI del cubo o carpeta.
- En Seleccionar cubo o carpeta, haga clic en Examinar para seleccionar el compartimento, cubo y carpeta en los que desea extraer los metadatos.
- Para Introducir URI manualmente, introduzca el URI en el campo proporcionado.
- Seleccione si las entidades se crean con aprobación manual o si el sistema las aprueba automáticamente.
- Opcional: seleccione el esquema en el que se crean las tablas externas. Si no se especifica ningún esquema, el sistema crea tablas en el esquema en función de la estructura de carpetas o en el esquema por defecto si no se detecta ningún esquema.
Revisión manual de entidades de metadatos extraídas
Al seleccionar el método manual de creación de entidades en un extractor de metadatos, debe revisar las entidades extraídas y aprobar o rechazar la adición a su catálogo.
- En la página de inicio, haga clic en Rellenar automáticamente el catálogo.
- Haga clic en el nombre del extractor de metadatos.
- Haga clic en el separador Entidades en espera de revisión.
- Para cada entidad, seleccione Aprobar o Rechazar.
- Opcional: seleccione Aprobar todo o Rechazar todo para definir todas las entidades en revisión en el estado seleccionado.
- Haga clic en Enviar.
Ver entidades revisadas
Puede ver entidades que se han revisado de forma manual o automática como parte de la extracción de metadatos y ver detalles de log, detalles de tabla o esquema de columna para esa entidad.
- En la página de inicio, haga clic en Rellenar automáticamente el catálogo.
- Haga clic en el nombre del extractor de metadatos.
- Haga clic en el separador Entidades revisadas.
- Junto a una entidad, haga clic en
Acciones.- Haga clic en Ver detalles de la tabla para ver los detalles de la tabla para la entidad seleccionada.
- Haga clic en Ver Esquema de Columna para ver el esquema de columna de la entidad seleccionada.
- Haga clic en Ver logs para ver los logs del extractor de metadatos para la entidad seleccionada.
Ver detalles de extractor de metadatos
Puede ver los detalles de un extractor de metadatos para ver su estado, el método de creación de metadatos, la ubicación base y los detalles de creación.
- En la página de inicio, haga clic en Rellenar automáticamente el catálogo.
- Haga clic en el nombre del extractor de metadatos.
- Haga clic en el separador Detalles.