Chargement des données dans Autonomous Data Warehouse à l'aide d'une tâche de programme de chargement de données

Une tâche de programme de chargement de données vous aide à transformer et à charger des données dans des lacs de données ou d'autres cibles telles qu'Oracle Autonomous Data Warehouse.

Les données source du chargement peuvent provenir d'une ou de plusieurs entités de données dans un schéma.

Dans ce tutoriel, vous effectuez les opérations suivantes :

Créez une tâche de programme de chargement de données pour transformer et charger des données à partir d'une seule entité de données Object Storage vers Autonomous Data Warehouse.
Publiez la tâche de programme de chargement de données dans une application.
Exécutez la tâche de programme de chargement de données.

Avant de commencer

Pour mener à bien ce tutoriel, vous devez disposer des éléments suivants :

Accès à un espace de travail Data Integration et stratégies pertinentes créées. Reportez-vous à connexion à Data Integration et à connexion aux sources de données.
Données échantillon téléchargées vers le serveur. Ressources de données créées pour la source Object Storage et la cible Autonomous Data Warehouse. Reportez-vous à Connexion aux sources de données.
Projet créé.

1. Création d'une tâche de programme de chargement de données

Dans la barre d'onglets, sélectionnez l'onglet Ouvrir (icône Plus), puis Projets.
Sur la page Projets, sélectionnez DI_Lab.
Sur la page DI_Lab de détails de projet, sélectionnez Tâches dans le sous-menu de gauche.
Sur la page Tâches, sélectionnez Créer une tâche, puis Programme de chargement de données.

La page Créer une tâche du programme de chargement de données s'ouvre dans un nouvel onglet. Les étapes numérotées et nommées en haut vous guident tout au long de la configuration. Une coche apparaît sur l'icône d'une étape une fois cette dernière configurée. Pour passer d'une étape à l'autre, sélectionnez Suivant ou Précédent. Vous pouvez également accéder directement à une étape configurée en sélectionnant son icône.
Sur la page Créer une tâche de programme de chargement de données, à l'étape Informations de base, sélectionnez les éléments suivants :
Pour cet élément Sélectionnez
Type de source File Storage
Type de cible Base de données
Type de chargement Entité de données unique
Pour le nom de la tâche, entrez Load Revenue Data into Data Warehouse. Sélectionnez ensuite Suivant pour passer à l'étape suivante.

Une case à cocher apparaît sur l'icône de l'étape Informations de base une fois celle-ci configurée.

Pour cet élément	Sélectionnez
Type de source	File Storage
Type de cible	Base de données
Type de chargement	Entité de données unique

A l'étape Source, sélectionnez les éléments suivants :

Pour cet élément	Sélectionnez
Ressource de données	Data_Lake
Connexion	Connexion par défaut
Compartiment	Compartiment contenant le bucket dans lequel vous avez téléchargé le fichier de données échantillon `REVENUE.CSV`
Bucket	Bucket Object Storage qui contient le fichier CSV échantillon

Sous Paramètres de fichier, sélectionnez les éléments suivants :
Pour cet élément Sélectionnez
Type de fichier CSV
Type de compression Automatique (valeur par défaut)
Données avec un en-tête la case à cocher
Délimiteur Virgule

Vous pouvez conserver les paramètres par défaut dans les autres champs.
Sous Entités des données disponibles, cochez la case de REVENUE.CSV, puis sélectionnez Définir en tant que source.

Le nom REVENUE.CSV apparaît en regard de Entité de données sélectionnée.
Sélectionnez Créer pour enregistrer la tâche et poursuivre les modifications.
Sélectionnez Suivant pour passer à l'étape Cible, puis sélectionnez les éléments suivants :
Pour cet élément Sélectionnez
Ressource de données Data_Warehouse
Connexion Connexion par défaut
Schéma BETA
Sous Emplacement de préparation, vous pouvez utiliser l'emplacement de préparation par défaut configuré lors de la création de la ressource de données cible.

Vous pouvez également désélectionner la case pour sélectionner un autre bucket Object Storage.
Sous Paramètres de chargement des entités à données cible, sélectionnez Créer de nouvelles entités à données.

Insérer est la stratégie d'intégration par défaut.
Sous Options de nom d'entité de données cible, sélectionnez Indiquer un nom d'entité. Ensuite, dans le champ Nom d'entité, entrez REVENUE_TARGET.
Sélectionnez Enregistrer pour enregistrer la tâche et poursuivre les modifications.
Sélectionnez Suivant pour passer à l'étape Transformation.

L'instance Data Xplorer interactive apparaît. Dans l'onglet Attributs, les attributs de l'entité de données REVENUE.CSV sont affichés.
Sous Attributs, recherchez SRC_ORDER_NUMBER. Ensuite, dans le menu Transformations () de SRC_ORDER_NUMBER, sélectionnez Remplissage NULL.
Dans la boîte de dialogue Remplissage NULL, procédez comme suit :
- Entrez Not Available dans le champ Remplacer par.
- Ne sélectionnez pas Conserver les attributs source.
- Conservez le nom et les autres champs tels quels.
Cliquez sur Appliquer.
Sélectionnez l'icône Transformations en regard de l'entité de données.

Le panneau Transformations apparaît. Vous pouvez y consulter la liste des transformations appliquées au jeu de données source. Pour enlever une transformation, sélectionnez l'icône de suppression en regard du nom de l'attribut transformé.
Pour fermer le panneau Transformations, sélectionnez l'icône X.
En regard de Attributs, sélectionnez Données pour accéder à l'onglet Données et localisez SRC_ORDER_NUMBER.

Les valeurs NULL dans SRC_ORDER_NUMBER ont été remplacées par la chaîne Not Available.
Sélectionnez Suivant pour accéder à l'étape Vérifier et valider.

La validation de la tâche commence automatiquement.

Un récapitulatif des détails de configuration de chaque étape est présenté dans un bloc. Si vous modifiez la configuration d'une étape, accédez à l'étape Vérifier et valider pour valider à nouveau la tâche.

Le résultat de la validation de tâche est affiché dans le dernier bloc, Validation.
Si la validation aboutit, sélectionnez Enregistrer et fermer.

Pour cet élément	Sélectionnez
Type de fichier	CSV
Type de compression	Automatique (valeur par défaut)
Données avec un en-tête	la case à cocher
Délimiteur	Virgule

Pour cet élément	Sélectionnez
Ressource de données	Data_Warehouse
Connexion	Connexion par défaut
Schéma	BETA

2. Publication d'une tâche de programme de chargement de données

Sur la page du détail du projet DI Lab, sélectionnez Tâches dans le sous-menu.
Dans la liste Tâches, recherchez Load Revenue Data into Data Warehouse.
Sélectionnez le menu Actions (), puis Publier vers l'application.
Dans la boîte de dialogue Publier sur une application, sélectionnez Lab Application.
Sélectionnez Publier.

Un message de notification apparaît avec un lien vers l'application pour afficher la tâche publiée.
Sélectionnez Visualiser l'application dans la notification. Sélectionnez ensuite X pour fermer la notification.

La liste Patches de la page de détails de l'application apparaît. Lorsque vous publiez une tâche, une seule entrée de patch est créée dans l'application.
Dans la liste Patches, vous pouvez surveiller le statut du patch. Sélectionnez Actualiser pour obtenir les dernières mises à jour de statut.

Un patch est une mise à jour apportée à l'application. Lorsque vous publiez une tâche, un patch Publier est créé. Lorsque vous annulez la publication d'une tâche, un patch Annuler la publication est créé.

Lorsque le statut du patch devient Réussite, une entrée de tâche publiée est créée dans la liste Tâches de la page de détails de l'application.

3. Exécution d'une tâche de programme de chargement de données

Dans la barre d'onglets, sélectionnez l'onglet Ouvrir (icône Plus), puis Applications.
Sélectionnez Lab Application pour ouvrir la page de détails.
Sur la page des détails de l'application, sélectionnez Tâches.
Dans la liste Tâches, sélectionnez Exécuter dans le menu Actions () de Load Revenue Data into Data Warehouse.

Un message de notification s'affiche et la liste Exécutions apparaît. Une exécution de tâche de programme de chargement de données est créée dans la liste Exécutions. Utilisez la liste Exécutions pour visualiser toutes les exécutions de tâche et leur statut.
Dans la liste Exécutions, sélectionnez Actualiser pour obtenir les dernières mises à jours de statut d'exécution de tâche.

En savoir plus sur les exécutions de tâche

Lorsque le statut d'exécution devient Succès, vous pouvez voir les valeurs pour Lecture des données et Lignes écrites.

Ressources supplémentaires

Pour plus d'informations, reportez-vous aux sections suivantes ::