Aperçu de File Storage with Lustre
Oracle Cloud Infrastructure (OCI) File Storage with Lustre est un service de stockage entièrement géré conçu pour répondre aux exigences de formation et d'inférence en IA/apprentissage automatique, ainsi qu'aux besoins en calcul de haute performance.
File Storage with Lustre automatise les tâches de déploiement, d'évolutivité et de maintenance de Lustre open source, vous permettant de vous concentrer sur les applications plutôt que sur la gestion de l'infrastructure Lustre. OCI déploie et gère tous les composants de serveur Lustre, y compris les serveurs de métadonnées, les serveurs de gestion et les serveurs de stockage.
Pour plus d'informations sur Lustre à code source libre, voir Présentation de Lustre.
Fonctions
Les principales fonctionnalités de File Storage with Lustre sont les suivantes :
- Architecture distribuée en parallèle
- File Storage with Lustre repose sur une architecture distribuée en parallèle, ce qui permet de traiter efficacement les charges de données massives. Les systèmes de fichiers peuvent s'adapter et livrer des vitesses agrégées élevées pour assurer un traitement rapide des données et un haut débit.
- Service entièrement géré
- Le déploiement, l'évolutivité et la maintenance automatisés simplifient la gestion pour les utilisateurs, éliminant ainsi la complexité traditionnellement associée à la configuration et à la maintenance des composants de l'infrastructure Lustre.
- Prêt pour la production pour l'intelligence artificielle et l'apprentissage automatique
- File Storage with Lustre est capable de traiter de grandes quantités de données, ce qui en fait un choix idéal pour les entreprises qui cherchent à tirer parti des analyses de mégadonnées et des modèles d'IA sophistiqués.
Concepts
- Performance
-
File Storage with Lustre offre quatre niveaux de performance :
- 125 MBps (1Gbps) par TiB provisionné
- 250 MBps (2 Gbit/s) par TiB provisionné
- 500 MBps (4 Gbit/s) par TiB provisionné
- 1000 MBps (8 Gbit/s) par TiB provisionné
Les administrateurs sont responsables de toute optimisation des performances côté client. Ils peuvent utiliser les utilitaires Lustre
lfspour des fonctions d'optimisation des performances telles que le striping des fichiers et la mise en page progressive des fichiers (PFL). - Clients Lustre
-
Les administrateurs sont responsables du déploiement des clients Lustre dans les hôtes GPU ou d'autres hôtes Compute qui ont besoin d'accéder au système de fichiers.
File Storage with Lustre utilise Lustre version 2.15.5 et vous pouvez utiliser des clients 2.15.5 pour le système d'exploitation suivant :
- Ubuntu 22.04 avec noyau 5.15.x
- Oracle Linux 8 avec noyau compatible Red Hat 4.18 (RHCK)
Pour plus d'informations, voir Montage et accès à un système de fichiers Lustre File System. Si vous avez besoin d'aide pour les clients Lustre, communiquez avec le soutien technique.
Disponibilité
Oracle héberge ses services OCI dans des régions et des domaines de disponibilité. Une région est une zone géographique précise, tandis qu'un domaine de disponibilité comprend un ou plusieurs centres de données dans cette région. OCI File Storage with Lustre est hébergé dans les régions suivantes :
| Nom de la région | Identificateur de la région | Clé de région |
|---|---|---|
| Australie - Est (Sydney) | ap-sydney-1 | SYD |
| Australie - Sud-Est (Melbourne) | ap-melbourne-1 | MEL |
| Brésil - Est (Sao Paulo) | sa-saopaulo-1 | GRU |
| Canada - Sud-Est (Montréal) | ca-montreal-1 | YUL |
| Allemagne - Centre (Francfort) | eu-frankfurt-1 | FRA |
| Nord de l'Indonésie (Batam) | ap-batam-1 | HSG |
| Japon - Centre (Osaka) | ap-osaka-1 | KIX |
| Japon - Est (Tokyo) | ap-tokyo-1 | NRT |
| Pays-Bas - Nord-Ouest (Amsterdam) | eu-amsterdam-1 | AMS |
| Centre de l'Espagne (Madrid) | eu-madrid-1 | MAD |
| Singapour (Singapour) | ap-singapore-1 | SIN |
| Royaume-Uni - Ouest (Newport) | uk-cardiff-1 | CWL |
| Royaume-Uni - Sud (Londres) | uk-london-1 | LHR |
| États-Unis - Est (Ashburn) | us-ashburn-1 | IAD |
| États-Unis - Midwest (Chicago) | us-chicago-1 | ORD |
| États-Unis - Ouest (Phoenix) | us-phoenix-1 | PHX |
| États-Unis - Ouest (San Jose) | us-sanjose-1 | SJC |
Certaines régions n'offrent pas le service File Storage with Lustre.
Voir À propos des régions et des domaines de disponibilité pour obtenir une liste complète des régions OCI disponibles, ainsi que les emplacements associés, les identificateurs de région, les clés de région et les domaines de disponibilité.
Authentification et autorisation
Chaque service d'Oracle Cloud Infrastructure est intégré à IAM aux fins d'authentification et d'autorisation pour la gestion des ressources OCI, pour toutes les interfaces (la console, la trousse SDK ou l'interface de ligne de commande et l'API REST).
Un administrateur de votre organisation doit configurer des groupes, des compartiments et des politiques qui déterminent quels utilisateurs peuvent accéder à quels services et ressources, ainsi que le type d'accès dont ils disposent. Par exemple, les politiques contrôlent les autorisations de création d'utilisateurs, de groupes et de compartiments, ou de création et de gestion des déploiements virtuels.
- Si vous êtes un nouvel administrateur, voir Introduction aux politiques.
- For details about writing policies for this service, see File Storage with Lustre Policies.
- Pour plus de détails sur l'écriture de politiques pour les ressources d'autres services, voir Informations de référence sur les politiques.
Sécurité
Pour des informations et des recommandations sur la sécurité, voir Sécurisation du service de stockage de fichiers d'Oracle Cloud Infrastructure File Storage with Lustre avec Lustre.
Méthodes d'accès à Oracle Cloud Infrastructure
Vous pouvez accéder aux ressources du service File Storage with Lustre à l'aide de la console (interface basée sur un navigateur), de l'interface de ligne de commande Oracle Cloud Infrastructure ou des API REST. Pour accéder à la console, vous devez utiliser un navigateur pris en charge.
Les instructions relatives aux trois méthodes sont incluses dans ce guide.
- La console OCI est une interface conviviale basée sur un navigateur. Pour accéder à la console, vous devez utiliser un navigateur pris en charge.
- Les API REST offrent le plus de fonctionnalités, mais nécessitent des connaissances en programmation. La rubrique Informations de référence sur les API et points d'extrémité d'API fournit des détails sur les points d'extrémité et des liens vers les documents de référence sur les API, y compris les API File Storage with Lustre.
- OCI provides SDKs that interact with File Storage with Lustre.
- L'interface de ligne de commande fournit un accès rapide et des fonctionnalités complètes, sans programmation.
- Pour utiliser l'interface de ligne de commande OCI ou les API REST, vous pouvez configurer votre environnement ou utiliser Oracle Cloud Infrastructure Cloud Shell.
- Pour utiliser l'interface de ligne de commande ou les API REST dans Cloud Shell, connectez-vous à la console. Voir Utilisation de Cloud Shell et Informations de référence sur l'interface de ligne de commande.
- Pour installer l'interface de ligne de commande OCI dans votre environnement, suivez les étapes sous Démarrage rapide relatives à l'installation de l'interface de ligne de commande.
- Pour utiliser les API REST, consultez la documentation sur les API REST et les Informations de référence sur les API et points d'extrémité d'API.
Limites relatives au stockage de fichiers File Storage with Lustre avec ressources Lustre
Voir File Storage with Lustre Limits et Limites par service pour la liste des limites applicables et les instructions pour demander l'augmentation d'une limite.
Pour définir des limites propres à un compartiment sur les systèmes de fichiers, les administrateurs peuvent utiliser Aperçu des quotas de compartiment.