Documentazione dell'infrastruttura Oracle Cloud

Panoramica dello storage dei file con Lustre

Oracle Cloud Infrastructure (OCI) File Storage con Lustre è un servizio di storage completamente gestito progettato per soddisfare le esigenze di formazione e inferenza AI/ML e di elaborazione ad alte prestazioni.

Lo storage di file con Lustre automatizza le attività di distribuzione, scalabilità e manutenzione di Lustre open source, consentendoti di concentrarti sulle applicazioni piuttosto che sulla gestione dell'infrastruttura Lustre. OCI distribuisce e gestisce tutti i componenti del server Lustre, inclusi i server di metadati, i server di gestione e i server di storage.

Per ulteriori informazioni sull'open source Lustre, vedere Introduzione a Lustre.

Funzioni

Le caratteristiche principali dello storage di file con Lustre includono:

Architettura distribuita parallela
Lo storage di file con Lustre si basa su un'architettura distribuita parallela, che consente di gestire in modo efficiente i grandi carichi di dati. I file system possono scalare e fornire elevate velocità di aggregazione, garantendo un'elaborazione rapida dei dati e un throughput elevato.
Servizio completamente gestita
L'implementazione, la scalabilità e la manutenzione automatizzate semplificano la gestione per gli utenti, eliminando la complessità tradizionalmente associata all'impostazione e alla manutenzione dei componenti dell'infrastruttura Lustre.
Predisposto per la produzione per AI e ML
Lo storage di file con Lustre è in grado di gestire grandi quantità di dati, rendendolo una scelta ideale per le organizzazioni che desiderano sfruttare l'analisi dei big data e modelli AI sofisticati.

Concetti

Prestazioni

Lo storage di file con Lustre offre quattro livelli di prestazioni:

  1. 125 MBps (1Gbps) per TiB fornito
  2. 250 MBps (2 Gbps) per ogni TiB di cui è stato eseguito il provisioning
  3. 500 MBps (4 Gbps) per ogni TiB di cui è stato eseguito il provisioning
  4. 1000 MBps (8 Gbps) per ogni TiB di cui è stato eseguito il provisioning

Gli amministratori sono responsabili di qualsiasi ottimizzazione delle prestazioni lato client. Possono utilizzare le utility Lustre lfs per ottimizzare le prestazioni, ad esempio lo striping dei file e il layout progressivo dei file (PFL).

Clienti Lustre

Gli amministratori sono responsabili della distribuzione dei client Lustre negli host GPU o in altri host di computazione che richiedono l'accesso al file system.

Lo storage di file con Lustre utilizza Lustre versione 2.15.5 ed è possibile utilizzare i client 2.15.5 per il seguente sistema operativo:

  • Ubuntu 22.04 con kernel 5.15.x
  • Oracle Linux 8 con kernel RHCK (Red Hat Compatible Kernel) 4.18

For more information, see Mounting and Accessing a Lustre File System. Se è necessaria assistenza per i client Lustre, contattare l'assistenza.

Disponibilità

Oracle ospita i propri servizi OCI in aree e domini di disponibilità. Un'area è un'area geografica localizzata, mentre un Dominio di disponibilità è uno o più Data Center situati all'interno di quell'area. OCI File Storage con Lustre è ospitato nelle seguenti aree:

Nome dell'area Identificativo dell'area Chiave area
Australia (Est) - Sydney ap-sydney-1 SYD
Australia (Sud-est) - Melbourne ap-melbourne-1 MEL
Brasile (Est) - San Paolo sa-saopaulo-1 GRU
Indonesia settentrionale (Batam) ap-batam-1 HSG
Giappone centrale (Osaka) ap-osaka-1 KIX
Giappone (Est) - Tokyo ap-tokyo-1 NRT
Paesi Bassi (Nord-ovest) - Amsterdam eu-amsterdam-1 AMS
Germania (Centro) - Francoforte eu-frankfurt-1 FRA
Regno Unito (Ovest) - Newport uk-cardiff-1 CWL
Regno Unito (Sud) - Londra uk-london-1 LHR
Stati Uniti (Est) - Ashburn us-ashburn-1 IAD
Stati Uniti (Midwest) - Chicago us-chicago-1 ORD
Stati Uniti (Ovest) - Phoenix us-phoenix-1 PHX
Stati Uniti (Ovest) - San Jose us-sanjose-1 SJC
Importante

Alcune aree non offrono storage di file con Lustre.

Consulta la sezione Informazioni sulle aree e sui domini di disponibilità per una lista completa delle aree OCI disponibili, insieme alle posizioni associate, agli identificativi delle aree, alle chiavi delle aree e ai domini di disponibilità.

Autenticazione e autorizzazione

Ogni servizio in Oracle Cloud Infrastructure è integrato con IAM per l'autenticazione e l'autorizzazione di tutte le interfacce (console, SDK o CLI e API REST).

Un amministratore dell'organizzazione deve impostare gruppi, compartimenti e criteri che controllano quali utenti possono accedere a quali servizi, quali risorse e il tipo di accesso di cui dispongono. Ad esempio, i criteri controllano chi può creare utenti, gruppi e compartimenti o chi può creare e gestire distribuzioni virtuali.

Modi per accedere a Oracle Cloud Infrastructure

Puoi accedere allo storage di file con le risorse Lustre utilizzando la console (un'interfaccia basata su browser), l'interfaccia CLI di Oracle Cloud Infrastructure o le API REST. Per accedere alla console, è necessario utilizzare un browser supportato.

Le istruzioni per tutti e tre i metodi sono incluse in questa guida.

  • OCI Console è un'interfaccia basata su browser facile da usare. Per accedere alla console, è necessario utilizzare un browser supportato.
  • Le API REST offrono il maggior numero di funzionalità, ma richiedono competenze di programmazione. Riferimento API e endpoint forniscono dettagli sull'endpoint e collegamenti ai documenti di riferimento API disponibili, incluso lo storage di file con le API Lustre.
  • OCI fornisce SDK che interagiscono con lo storage di file con Lustre.
  • L'interfaccia CLI (Command Line Interface) offre sia un accesso rapido che una funzionalità completa senza necessità di programmazione.
  • Per utilizzare l'interfaccia CLI OCI o le API REST, puoi impostare il tuo ambiente o utilizzare Oracle Cloud Infrastructure Cloud Shell.