Visión general del almacenamiento de archivos con Lustre
Oracle Cloud Infrastructure (OCI) File Storage con Lustre es un servicio de almacenamiento totalmente gestionado diseñado para satisfacer las demandas de entrenamiento e inferencia de IA/AA y las necesidades informáticas de alto rendimiento.
El almacenamiento de archivos con Lustre automatiza las tareas de despliegue, ampliación y mantenimiento de Lustre de código abierto, lo que le permite centrarse en las aplicaciones en lugar de en la gestión de la infraestructura de Lustre. OCI despliega y mantiene todos los componentes del servidor Lustre, incluidos los servidores de metadatos, los servidores de gestión y los servidores de almacenamiento.
Para obtener más información sobre Lustre de código abierto, consulte Introducción a Lustre.
Funciones
Entre las funciones clave del almacenamiento de archivos con Lustre se incluyen:
- Arquitectura distribuida en paralelo
- El almacenamiento de archivos con Lustre se basa en una arquitectura distribuida paralela, lo que permite un manejo eficiente de cargas de datos masivas. Los sistemas de archivos pueden escalar y ofrecer altas velocidades agregadas, lo que garantiza un procesamiento de datos rápido y un alto rendimiento.
- Servicio totalmente gestionado
- El despliegue, la ampliación y el mantenimiento automatizados simplifican la gestión de los usuarios, eliminando la complejidad tradicionalmente asociada a la configuración y el mantenimiento de los componentes de infraestructura de Lustre.
- Preparado para la producción de IA y AA
- El almacenamiento de archivos con Lustre es capaz de manejar grandes cantidades de datos, lo que lo convierte en una opción ideal para las organizaciones que buscan aprovechar el análisis de big data y los modelos de IA sofisticados.
Conceptos
- Rendimiento
-
El almacenamiento de archivos con Lustre ofrece cuatro niveles de rendimiento:
- 125 MBps (1Gbps) por aprovisionamiento TiB
- 250 MBps (2 Gbps) por aprovisionamiento TiB
- 500 MBps (4 Gbps) por aprovisionamiento TiB
- 1000 MBps (8 Gbps) por aprovisionamiento TiB
Los administradores son responsables de cualquier optimización del rendimiento del cliente. Pueden utilizar las utilidades Lustre
lfspara funciones de optimización del rendimiento, como la segmentación de archivos y el diseño progresivo de archivos (PFL). - Clientes de Lustre
-
Los administradores son responsables de desplegar clientes Lustre en los hosts de GPU u otros hosts de Compute que necesitan acceso al sistema de archivos.
File Storage with Lustre utiliza la versión 2.15.5 de Lustre y puede utilizar clientes 2.15.5 para el siguiente sistema operativo:
- Ubuntu 22.04 con núcleo 5.15.x
- Oracle Linux 8 con núcleo compatible con 4.18 Red Hat (RHCK)
Para obtener más información, consulte Mounting and Accessing a Lustre File System. Si necesita ayuda con los clientes de Lustre, póngase en contacto con los servicios de soporte.
Disponibilidad
Oracle aloja sus servicios de OCI en regiones y dominios de disponibilidad. Una región es un área geográfica localizada, mientras que un dominio de disponibilidad es uno o más centros de datos de esa región. OCI File Storage con Lustre se aloja en las siguientes regiones:
| Nombre de región | Identificador de región | Clave de región |
|---|---|---|
| Este de Australia (Sídney) | ap-sydney-1 | SYD |
| Sureste de Australia (Melbourne) | ap-melbourne-1 | MEL |
| Este de Brasil (São Paulo) | sa-saopaulo-1 | GRU |
| Sureste de Canadá (Montreal) | ca-montreal-1 | YUL |
| Centro de Alemania (Fráncfort) | eu-frankfurt-1 | FRA |
| Norte de Indonesia (Batam) | ap-batam-1 | HSG |
| Centro de Japón (Osaka) | ap-osaka-1 | KIX |
| Este de Japón (Tokio) | ap-tokyo-1 | NRT |
| Noroeste de Países Bajos (Ámsterdam) | eu-amsterdam-1 | AMS |
| Centro de España (Madrid) | eu-madrid-1 | MAD |
| Singapur (Singapur) | ap-singapore-1 | Número de identificación del vehículo |
| Emiratos Árabes Unidos central (Abu Dabi) | me-abudhabi-1 | AUH |
| Oeste de Reino Unido (Newport) | uk-cardiff-1 | CWL |
| Sur de Reino Unido (Londres) | uk-london-1 | LHR |
| Este de EE. UU. (Ashburn) | us-ashburn-1 | IAD |
| Medio Oeste de EE. UU. (Chicago) | us-chicago-1 | Orden |
| Oeste de EE. UU. (Phoenix) | us-phoenix-1 | PHX |
| Oeste de EE. UU. (San José) | us-sanjose-1 | SJC |
Algunas regiones no ofrecen almacenamiento de archivos con Lustre.
Consulte About Regions and Availability Domains para obtener una lista completa de regiones de OCI disponibles, junto con los ubicaciones, identificadores, claves y dominios de disponibilidad asociados.
Autenticación y autorización
Cada servicio de Oracle Cloud Infrastructure se integra con IAM con fin de autenticación y autorización para la gestión de recursos de OCI, para todas las interfaces (la consola, el SDK o el CLI, y el API de REST).
Un administrador de la organización debe configurar grupos, compartimentos y políticas que controlen los usuarios que pueden acceder a determinados servicios y recursos, así como el tipo de acceso de que disponen. Por ejemplo, las políticas controlan quién puede crear usuarios, grupos y compartimentos, o quién puede crear y gestionar despliegues virtuales.
- Si es un administrador nuevo, consulte Introducción a las políticas.
- Para obtener más información sobre la escritura de políticas para este servicio, consulte Almacenamiento de archivos con políticas de Lustre.
- Para obtener más información sobre la escritura de políticas de recursos en otros servicios, consulte Referencia de políticas.
Seguridad
Para obtener información y recomendaciones de seguridad, consulte Protección de Oracle Cloud Infrastructure File Storage with Lustre.
Formas de acceder a Oracle Cloud Infrastructure
Puede acceder al almacenamiento de archivos con recursos de Lustre mediante la consola (una interfaz basada en explorador), la CLI o las API REST de Oracle Cloud Infrastructure. Para acceder a la consola, debe utilizar un explorador soportado.
En esta guía se incluyen instrucciones para los tres métodos.
- La consola de OCI es una interfaz fácil de usar basada en explorador. Para acceder a la consola, debe utilizar un explorador soportado.
- Las API de REST ofrecen la máxima funcionalidad, pero para usarlas se necesita experiencia en programación. Puntos finales y referencia del API proporciona información detallada sobre los puntos final y los enlaces a las páginas de referencia del API disponibles, incluidas la API de Lustre y el almacenamiento de archivos.
- OCI proporciona SDK que interactúan con File Storage con Lustre.
- La interfaz de línea de comandos (CLI) proporciona un acceso rápido y una funcionalidad completa sin necesidad de programación.
- Para utilizar la CLI o las API REST de OCI, puede configurar su entorno o utilizar Oracle Cloud Infrastructure Cloud Shell.
- Para utilizar la CLI o la API de REST en Cloud Shell, inicie sesión en la consola. Consulte Using Cloud Shell y la Referencia de comandos de la CLI.
- Para instalar la CLI de OCI en su entorno, siga los pasos del inicio rápido de Instalar CLI.
- Al utilizar las API de REST, consulte la documentación de la API de REST y los puntos finales y la referencia de API.
Límites del almacenamiento de archivos con recursos Lustre
Consulte la sección sobre almacenamiento de archivos con límites de Lustre y límites por servicio para solicitar una lista de límites aplicables e instrucciones para solicitar un aumento de límite.
Para definir límites específicos de compartimento en sistemas de archivos, los administradores pueden utilizar Visión general de cuotas de compartimento.