4 Informazioni sull'architettura Medallion
L'architettura Medallion è un modello di progettazione stratificato per l'organizzazione e l'elaborazione dei dati in un ambiente data lakehouse.
- Dati affidabili e di alta qualità
- Tracciabilità e verificabilità
- Pipeline modulari ed efficienti
AI Data Platform Workbench ti offre gli strumenti per stabilire le tue fasi in bronzo, argento e oro e automatizzare la pulizia, la convalida e l'arricchimento dei dati attraverso ogni livello di medaglione.
Il livello bronzo memorizza i dati grezzi ingeriti dai sistemi di origine, conservando i dati nella loro forma originale. Funziona come la tua unica fonte di verità e supporta tracciabilità e verificabilità. I dati vengono inseriti direttamente in AI Data Platform, preservando la struttura dei dati originale e supportando un recupero rapido e scalabile per l'elaborazione a valle. I dati vengono quindi incorporati nello strato di bronzo ed è pronto per l'elaborazione.
I dati dello strato di bronzo vengono elaborati e inviati allo strato d'argento. Flussi di lavoro, agenti e altre funzionalità di automazione consentono di pulire, rimuovere duplicati e trasformare i dati in modo che siano pronti per l'analisi. I dati nel livello Silver vengono spesso uniti tra le fonti per fornire informazioni standardizzate e coerenti.
Nel livello avanzato, gli analisti di dati gestiscono e sviluppano i dati puliti per prepararli al consumo nei dashboard dei dati, negli analytics avanzati e nei modelli di machine learning. I dati preparati in questo modo vengono memorizzati nel livello Gold e i dati nel livello Gold vengono trattati come i più affidabili e più adatti per i modelli di formazione e lo sviluppo di visualizzazioni dei dati, dashboard e altro ancora.