Documentation Oracle Cloud Infrastructure

A propos des performances d'actualisation des données

Oracle s'efforce constamment d'améliorer les performances de chargement des données dans les pipelines.

Les performances de chargement des données pour votre instance varient. Le temps nécessaire au traitement des données, qu'il s'agisse de chargements complets d'entrepôt ou de chargements de données incrémentiels, dépend de divers facteurs. Un chargement de pipeline de données inclut les éléments suivants :

  • Extraction de données à partir des applications Oracle Fusion Cloud.
  • Chargement des données dans Oracle Autonomous Data Warehouse.
  • Transformer les données en schéma prédéfini.
Le temps nécessaire pour effectuer chacune de ces étapes est déterminé par divers facteurs, notamment :
  • Disponibilité du système source.
  • Taille et complexité des données source.
  • Les domaines fonctionnels activés.
  • Requêtes SQL personnalisées ayant un impact sur Oracle Autonomous Data Warehouse.
  • Vos requêtes s'exécutent simultanément.
  • Personnalisations effectuées sur les objets du système source (qui nécessitent un chargement complet pour ces objets).
  • Application de patches aux systèmes source et cible.
Pour l'actualisation quotidienne des données et l'exécution du pipeline afin de mettre à jour toutes les mesures clés et les tableaux de bord qui en résultent, la durée d'exécution dépend de nombreux facteurs tels que la quantité de données à actualiser de manière incrémentielle. Pour planifier vos besoins en matière de workflow en aval, veillez à effectuer les actions suivantes :
  • Activez l'estimation de l'exécution du pipeline à l'aide de la fonction d'aperçu de l'estimation d'actualisation des données sur la page Activer les fonctionnalités. Les détails de fin de l'actualisation estimée sont visibles sur la page Paramètres du pipeline.
  • Déclenchez toutes les opérations suivantes en fonction de l'heure de fin estimée de l'actualisation.
  • Contactez le support technique Oracle si l'actualisation n'est pas terminée avant l'heure de fin estimée.
  • Abonnez-vous à Notifications d'événement pour recevoir une notification par courriel dès qu'un problème survient lors de l'exécution du pipeline. Reportez-vous à Activation des notifications d'événement (aperçu).

L'actualisation des données est généralement effectuée quotidiennement, sauf si les travaux de pipeline de données sont désactivés ou bloqués. Vous pouvez observer les temps de chargement des données pour votre configuration source et d'entrepôt spécifique afin d'estimer le temps nécessaire pour une actualisation quotidienne incrémentielle et pour un chargement complet de l'entrepôt. Ces informations peuvent vous aider à planifier le moment optimal de la journée pour commencer l'actualisation quotidienne de vos données. Vous pouvez planifier l'exécution du chargement des données pendant les heures creuses. Par exemple, exécutez les chargements de data warehouse complets initiaux pendant les week-ends et les chargements incrémentiels pendant les soirs de la semaine afin de vous assurer que les utilisateurs ne sont pas affectés.

Vous pouvez afficher l'heure de fin estimée de l'actualisation pour les pipelines quotidiens sur la page Paramètres du pipeline dans le champ Fin estimée de l'actualisation en tant que fonction d'aperçu. Vous pouvez ainsi planifier vos tâches dans l'application.
Détails de l'achèvement de l'actualisation estimée sur la page Paramètres du pipeline

Le processus d'actualisation incrémentielle des données actualise les objets en tant qu'ensembles de données de base et dérivés. Les jeux de données de base sont des objets qui font partie du pipeline principal et proviennent directement d'Oracle Fusion Cloud Applications et sont nécessaires pour le contenu principal (par exemple, les transactions et les dimensions). Les ensembles de données dérivés sont basés sur des données qui nécessitent un traitement supplémentaire (par exemple, les ensembles de données utilisés dans des cas d'utilisation de machine learning prédéfinis). Le processus d'actualisation incrémentielle actualise d'abord les ensembles de données de base pour garantir la disponibilité rapide des données essentielles. Le système prédit et affiche l'heure de fin de chargement incrémentiel, mais ne fait pas de même pour les ensembles de données dérivés. Si vous n'avez pas activé de contenu comportant des jeux de données dérivés, vous ne verrez pas ces informations sur la page Paramètres de pipeline de la section Pipeline de données.