Überblick über File Storage with Lustre

Oracle Cloud Infrastructure (OCI) File Storage with Lustre ist ein vollständig verwalteter Speicherservice, der den Anforderungen von KI/ML-Training und -Inferenz sowie High Performance Computing gerecht wird.

File Storage with Lustre automatisiert Bereitstellungs-, Skalierungs- und Wartungsaufgaben von Open Source Lustre, sodass Sie sich auf Anwendungen anstatt auf das Lustre-Infrastrukturmanagement konzentrieren können. OCI stellt alle Lustre-Serverkomponenten bereit und verwaltet sie, einschließlich Metadatenserver, Managementserver und Speicherserver.

Weitere Informationen zu Open Source Lustre finden Sie unter Einführung in Lustre.

Features

Zu den wichtigsten Features für File Storage with Lustre gehören:

Parallel verteilte Architektur
File Storage with Lustre basiert auf einer parallelen verteilten Architektur, die eine effiziente Handhabung massiver Dataloads ermöglicht. Dateisysteme können skaliert und hohe Aggregatgeschwindigkeiten bereitstellen, wodurch eine schnelle Datenverarbeitung und ein hoher Durchsatz sichergestellt werden.
Vollständig verwalteter Dienst
Die automatisierte Bereitstellung, Skalierung und Wartung vereinfacht die Verwaltung für Benutzer und eliminiert die Komplexität, die traditionell mit der Einrichtung und Wartung von Lustre-Infrastrukturkomponenten verbunden ist.
Produktionsbereit für KI und ML
File Storage with Lustre ist in der Lage, große Datenmengen zu verarbeiten, was es zu einer idealen Wahl für Unternehmen macht, die Big-Data-Analysen und ausgeklügelte KI-Modelle nutzen möchten.

Konzepte

Leistung

File Storage with Lustre bietet vier Performanceebenen:

  1. 125 MBps (1Gbps) pro bereitgestelltem TiB
  2. 250 MBps (2 Gbit/s) pro bereitgestelltem TiB
  3. 500 MBps (4 Gbit/s) pro bereitgestelltem TiB
  4. 1000 MBps (8 Gbit/s) pro bereitgestelltem TiB

Administratoren sind für Client-seitige Performanceoptimierungen verantwortlich. Sie können Lustre lfs-Utilitys für Performanceoptimierungsfeatures wie File Striping und progressives Dateilayout (PFL) verwenden.

Lustre Kunden

Administratoren sind für das Deployment von Lustre-Clients in den GPU-Hosts oder anderen Compute-Hosts verantwortlich, die Zugriff auf das Dateisystem benötigen.

File Storage with Lustre verwendet Lustre Version 2.15.5 und Sie können 2.15.5-Clients für das folgende Betriebssystem verwenden:

  • Ubuntu 22.04 mit 5.15.x Kernel
  • Oracle Linux 8 mit 4.18 Red Hat Compatible Kernel (RHCK)

Weitere Informationen finden Sie unter Lustre File System mounten und darauf zugreifen. Wenn Sie Hilfe bei Lustre-Clients benötigen, wenden Sie sich an den Support.

Verfügbarkeit

Oracle hostet seine OCI-Services in Regionen und Availability-Domains. Eine Region ist ein bestimmter geografischer Bereich. Eine Availability-Domain umfasst mindestens ein Data Center innerhalb dieser Region. OCI File Storage with Lustre wird in den folgenden Regionen gehostet:

Regionsname Regions-ID Regionsschlüssel
Australia East (Sydney) ap-sydney-1 SYD
Australia Southeast (Melbourne) ap-melbourne-1 MEL
Brazil East (Sao Paulo) sa-saopaulo-1 GRU
Canada Southeast (Montreal) ca-montreal-1 YUL
Germany Central (Frankfurt) eu-frankfurt-1 FRA
Indonesischer Norden (Batam) ap-batam-1 HSG
Japan Central (Osaka) ap-osaka-1 KIX
Japan East (Tokio) ap-tokyo-1 NRT
Netherlands Northwest (Amsterdam) eu-amsterdam-1 AMS
Spain Central (Madrid) eu-madrid-1 MAD
UK West (Newport) uk-cardiff-1 CWL
UK South (London) uk-london-1 LHR
US East (Ashburn) us-ashburn-1 IAD
US Midwest (Chicago) us-chicago-1 ORD
US West (Phoenix) us-phoenix-1 PHX
US West (San Jose) us-sanjose-1 SJC
Wichtig

Einige Regionen bieten File Storage with Lustre nicht an.

Eine vollständige Liste der verfügbaren OCI-Regionen sowie zugehörige Standorte, Regions-IDs, Regionalschlüssel und Verfügbarkeitsdomänen finden Sie im Abschnitt Regionen und Availability-Domainen.

Authentifizierung und Autorisierung

Jeder Service in Oracle Cloud Infrastructure kann zur Authentifizierung und Autorisierung für alle Schnittstellen (Konsole, SDK oder CLI und REST-API) und zur Verwaltung von OCI-Ressourcen in IAM integrieren.

Ein Administrator in Ihrer Organisation muss Gruppen, Compartments  und Policys  einrichten, die den Zugriffstyp sowie den Zugriff der Benutzer auf Services und Ressourcen steuern. Mit Policys können Sie beispielsweise steuern, wer Benutzer, Gruppen und Compartments erstellen oder wer virtuelle Deployments erstellen und verwalten kann.

Möglichkeiten für den Zugriff auf Oracle Cloud Infrastructure

Sie können über die Konsole (eine browserbasierte Schnittstelle), die Oracle Cloud Infrastructure-CLI oder REST-APIs auf File Storage with Lustre-Ressourcen zugreifen. Um auf die Konsole zuzugreifen, müssen Sie einen unterstützten Browser verwenden.

In dieser Dokumentation finden Sie Anweisungen für alle drei Methoden.

  • Die OCI-Konsole ist eine benutzerfreundliche, browserbasierte Schnittstelle. Um auf die Konsole zuzugreifen, müssen Sie einen unterstützten Browser verwenden.
  • Die REST-APIs bieten die meisten Funktionen, erfordern jedoch Programmierkenntnisse. API-Referenz und -Endpunkt enthalten Endpunktdetails und Links zu den verfügbaren API-Referenzdokumenten, einschließlich der File Storage with Lustre-APIs.
  • OCI stellt SDKs bereit, die mit File Storage with Lustre interagieren.
  • Die Befehlszeilenschnittstelle (CLI) bietet sowohl Schnellzugriff als auch vollständige Funktionalität ohne Programmierung.
  • Um die OCI-CLI oder REST-APIs verwenden zu können, können Sie entweder Ihre Umgebung einrichten oder Oracle Cloud Infrastructure Cloud Shell verwenden.