Überblick über File Storage with Lustre
Oracle Cloud Infrastructure (OCI) File Storage with Lustre ist ein vollständig verwalteter Speicherservice, der den Anforderungen von KI/ML-Training und -Inferenz sowie High Performance Computing gerecht wird.
File Storage with Lustre automatisiert Bereitstellungs-, Skalierungs- und Wartungsaufgaben von Open Source Lustre, sodass Sie sich auf Anwendungen anstatt auf das Lustre-Infrastrukturmanagement konzentrieren können. OCI stellt alle Lustre-Serverkomponenten bereit und verwaltet sie, einschließlich Metadatenserver, Managementserver und Speicherserver.
Weitere Informationen zu Open Source Lustre finden Sie unter Einführung in Lustre.
Features
Zu den wichtigsten Features für File Storage with Lustre gehören:
- Parallel verteilte Architektur
- File Storage with Lustre basiert auf einer parallelen verteilten Architektur, die eine effiziente Handhabung massiver Dataloads ermöglicht. Dateisysteme können skaliert und hohe Aggregatgeschwindigkeiten bereitstellen, wodurch eine schnelle Datenverarbeitung und ein hoher Durchsatz sichergestellt werden.
- Vollständig verwalteter Dienst
- Die automatisierte Bereitstellung, Skalierung und Wartung vereinfacht die Verwaltung für Benutzer und eliminiert die Komplexität, die traditionell mit der Einrichtung und Wartung von Lustre-Infrastrukturkomponenten verbunden ist.
- Produktionsbereit für KI und ML
- File Storage with Lustre ist in der Lage, große Datenmengen zu verarbeiten, was es zu einer idealen Wahl für Unternehmen macht, die Big-Data-Analysen und ausgeklügelte KI-Modelle nutzen möchten.
Konzepte
- Leistung
-
File Storage with Lustre bietet vier Performanceebenen:
- 125 MBps (1Gbps) pro bereitgestelltem TiB
- 250 MBps (2 Gbit/s) pro bereitgestelltem TiB
- 500 MBps (4 Gbit/s) pro bereitgestelltem TiB
- 1000 MBps (8 Gbit/s) pro bereitgestelltem TiB
Administratoren sind für Client-seitige Performanceoptimierungen verantwortlich. Sie können Lustre
lfs
-Utilitys für Performanceoptimierungsfeatures wie File Striping und progressives Dateilayout (PFL) verwenden. - Lustre Kunden
-
Administratoren sind für das Deployment von Lustre-Clients in den GPU-Hosts oder anderen Compute-Hosts verantwortlich, die Zugriff auf das Dateisystem benötigen.
File Storage with Lustre verwendet Lustre Version 2.15.5 und Sie können 2.15.5-Clients für das folgende Betriebssystem verwenden:
- Ubuntu 22.04 mit 5.15.x Kernel
- Oracle Linux 8 mit 4.18 Red Hat Compatible Kernel (RHCK)
Weitere Informationen finden Sie unter Lustre File System mounten und darauf zugreifen. Wenn Sie Hilfe bei Lustre-Clients benötigen, wenden Sie sich an den Support.
Verfügbarkeit
Oracle hostet seine OCI-Services in Regionen und Availability-Domains. Eine Region ist ein bestimmter geografischer Bereich. Eine Availability-Domain umfasst mindestens ein Data Center innerhalb dieser Region. OCI File Storage with Lustre wird in den folgenden Regionen gehostet:
Regionsname | Regions-ID | Regionsschlüssel |
---|---|---|
Australia East (Sydney) | ap-sydney-1 | SYD |
Australia Southeast (Melbourne) | ap-melbourne-1 | MEL |
Brazil East (Sao Paulo) | sa-saopaulo-1 | GRU |
Canada Southeast (Montreal) | ca-montreal-1 | YUL |
Germany Central (Frankfurt) | eu-frankfurt-1 | FRA |
Indonesischer Norden (Batam) | ap-batam-1 | HSG |
Japan Central (Osaka) | ap-osaka-1 | KIX |
Japan East (Tokio) | ap-tokyo-1 | NRT |
Netherlands Northwest (Amsterdam) | eu-amsterdam-1 | AMS |
Spain Central (Madrid) | eu-madrid-1 | MAD |
UK West (Newport) | uk-cardiff-1 | CWL |
UK South (London) | uk-london-1 | LHR |
US East (Ashburn) | us-ashburn-1 | IAD |
US Midwest (Chicago) | us-chicago-1 | ORD |
US West (Phoenix) | us-phoenix-1 | PHX |
US West (San Jose) | us-sanjose-1 | SJC |
Einige Regionen bieten File Storage with Lustre nicht an.
Eine vollständige Liste der verfügbaren OCI-Regionen sowie zugehörige Standorte, Regions-IDs, Regionalschlüssel und Verfügbarkeitsdomänen finden Sie im Abschnitt Regionen und Availability-Domainen.
Authentifizierung und Autorisierung
Jeder Service in Oracle Cloud Infrastructure kann zur Authentifizierung und Autorisierung für alle Schnittstellen (Konsole, SDK oder CLI und REST-API) und zur Verwaltung von OCI-Ressourcen in IAM integrieren.
Ein Administrator in Ihrer Organisation muss Gruppen, Compartments und Policys einrichten, die den Zugriffstyp sowie den Zugriff der Benutzer auf Services und Ressourcen steuern. Mit Policys können Sie beispielsweise steuern, wer Benutzer, Gruppen und Compartments erstellen oder wer virtuelle Deployments erstellen und verwalten kann.
- Wenn Sie ein neuer Administrator sind, lesen Sie Erste Schritte mit Policys.
- Einzelheiten zum Schreiben von Policys für diesen Service finden Sie unter File Storage with Lustre-Policys.
- Einzelheiten zum Schreiben von Policys für Ressourcen in anderen Services finden Sie in der Policy-Referenz.
Sicherheit
Sicherheitsinformationen und -empfehlungen finden Sie unter Oracle Cloud Infrastructure File Storage with Lustre sichern.
Möglichkeiten für den Zugriff auf Oracle Cloud Infrastructure
Sie können über die Konsole (eine browserbasierte Schnittstelle), die Oracle Cloud Infrastructure-CLI oder REST-APIs auf File Storage with Lustre-Ressourcen zugreifen. Um auf die Konsole zuzugreifen, müssen Sie einen unterstützten Browser verwenden.
In dieser Dokumentation finden Sie Anweisungen für alle drei Methoden.
- Die OCI-Konsole ist eine benutzerfreundliche, browserbasierte Schnittstelle. Um auf die Konsole zuzugreifen, müssen Sie einen unterstützten Browser verwenden.
- Die REST-APIs bieten die meisten Funktionen, erfordern jedoch Programmierkenntnisse. API-Referenz und -Endpunkt enthalten Endpunktdetails und Links zu den verfügbaren API-Referenzdokumenten, einschließlich der File Storage with Lustre-APIs.
- OCI stellt SDKs bereit, die mit File Storage with Lustre interagieren.
- Die Befehlszeilenschnittstelle (CLI) bietet sowohl Schnellzugriff als auch vollständige Funktionalität ohne Programmierung.
- Um die OCI-CLI oder REST-APIs verwenden zu können, können Sie entweder Ihre Umgebung einrichten oder Oracle Cloud Infrastructure Cloud Shell verwenden.
- Um die CLI- oder REST-APIs in Cloud Shell zu verwenden, melden Sie sich beim Konsolenmodul an. Siehe Cloud Shell verwenden und OCI-Befehlsreferenz.
- Um die OCI-CLI in Ihrer Umgebung zu installieren, führen Sie die Schritte im Schnellstart CLI installieren aus.
- Informationen zur Verwendung von REST-APIs finden Sie in der REST-API-Dokumentation und unter API-Referenz und -Endpunkte.
Limits für File Storage with Lustre-Ressourcen
Unter Limits für File Storage with Lustre und Servicelimits finden Sie eine Liste der jeweiligen Limits sowie Anweisungen dazu, wie die Erhöhung eines Limits angefordert wird.
Um Compartment-spezifische Limits für Dateisysteme festzulegen, können Administratoren Compartment-Quotas - Überblick verwenden.