オプションのGPU拡張

GPU加速ワークロードを有効にするには、GPUがインストールされているサーバー・ノードでOracle Private Cloud Applianceを拡張できます。 X10-2c GPUノードは、Intel Xeon Platinum 8480+アーキテクチャ、高速イーサネット接続、および4つのNVIDIA L40S GPU (48GB GDDR6メモリー、1466ピークFP8 TFLOPS)を備えた3つのRUサーバーです。

X10-2c GPUノードは、配電ユニット(PDU)およびネットワーク・コンポーネントを含む拡張ラックに配布され、追加の物理リソースをベース・ラックと統合します。 GPU拡張ラックには、ファクトリ出荷時にインストールされるGPUノードが少なくとも1つ、最大6つ含まれています。初期デプロイメント後にさらにノードをインストールできます。出荷時にインストールされるノードの数に関係なく、ケーブル配線はフル・ラック構成用に事前インストールされています。最大2つの拡張ラックをベース・ラックに接続でき、最大12個のGPUノードを使用できます。

インストール要件

Site Preparation: GPUノードを使用してOracle Private Cloud Appliance環境を拡張する場合は、追加のハードウェアのインストールを慎重に計画してください。 X10-2c GPU拡張ラックには、基本ラックと同じ外部ディメンションがあり、同じタイプのハードウェアが含まれています。したがって、基本ラック・サイトの要件も拡張ラックに適用されます。詳細は、「サイト要件」の章を参照してください。
ラックの配線: 基本ラックとGPU拡張ラック間のケーブル接続は、25 mを超えてはなりません。基本ラックの近くの拡張ラックのスペースを割り当て、ラック間ケーブルが床または天井を通るときに、指定された最大長内に収まるようにします。必要なケーブル長を順序で指定する必要があります。出荷に含まれるケーブルのデフォルトの長さは10 mです。
高パフォーマンス・ストレージ: GPUコンピュート・シェイプは、高速および低レイテンシ用に最適化されています。高パフォーマンス・ストレージを排他的に使用します。つまり、システムのZFS Storage Applianceは、1つ以上の「パフォーマンス」ディスク・トレイで構成される高パフォーマンス・ストレージ・プールを提供する必要があります。既存のインストールにパフォーマンス・トレイがない場合は、GPU拡張順序に追加されます。基本ラックにパフォーマンス・トレーを追加するためのラック・ユニットがない場合は、ストレージ拡張ラックに取り付けられます。 GPU拡張ラックをアクティブ化する前に、高パフォーマンスのストレージ・プールを構成する必要があります。

基本ラックへの接続

X10-2c GPU拡張ラックが割り当てられたスペースにある場合は、ベース・ラックに接続する必要があります。拡張ラックのリーフ・スイッチは、データ・ネットワークを拡張ラックに拡張するためにベース・ラックのスパイン・スイッチに相互接続されます。同様に、拡張ラック・コンポーネントは、ラック内の管理スイッチ間のケーブル接続を介して内部管理ネットワークに追加されます。この設定に必要なポートは、接続されているすべてのスイッチで予約されています。

管理スイッチの接続

GPU拡張ラック管理スイッチは、25Gbps SFP28トランシーバを備えた2つのケーブル・リンクを使用してベース・ラック管理スイッチに接続する必要があります。

GPU拡張ラックの側面では、管理スイッチ・ポート49および50を使用します。
最初のGPU拡張ラックから、基本ラック管理スイッチ・ポート49および50にケーブルを接続します。 2つ目のGPU拡張ラックから、基本ラック管理スイッチ・ポート51および52にケーブルを接続します。

リーフ・スイッチを接続

各GPU拡張ラックのリーフ・スイッチには、基本ラックの2つのスパイン・スイッチへの冗長なクロス・コネクトがあります。 GPU拡張ラックとベース・ラックの間には、100Gbps QSFP28トランシーバを使用した合計8つのケーブル・リンクがあります。

GPU拡張ラックの側面で、各リーフ・スイッチのポート33-36を使用します。
次のパターンを使用して、最初のGPU拡張ラックからベース・ラックのスパイン・スイッチにケーブルを接続します:
- Leaf1 (RU18/pcaswlf03)ポート33および34からSpine1 (RU29/pcaswsp01)ポート11および12
- Leaf1 (RU18/pcaswlf03)ポート35および36からSpine2 (RU30/pcaswsp02)ポート11および12
- Leaf2 (RU19/pcaswlf04)ポート33および34からSpine1 (RU29/pcaswsp01)ポート13および14
- Leaf2 (RU19/pcaswlf04)ポート35および36からSpine2 (RU30/pcaswsp02)ポート13および14
次のパターンを使用して、2つめのGPU拡張ラックからベース・ラックのスパイン・スイッチにケーブルを接続します:
- Leaf1 (RU18/pcaswlf05)ポート33および34からSpine1 (RU29/pcaswsp01)ポート15および16
- Leaf1 (RU18/pcaswlf05)ポート35および36からSpine2 (RU30/pcaswsp02)ポート15および16
- Leaf2 (RU19/pcaswlf06)ポート33および34からSpine1 (RU29/pcaswsp01)ポート17および18
- Leaf2 (RU19/pcaswlf06)ポート35および36からSpine2 (RU30/pcaswsp02)ポート17および18

物理接続が配置されている場合、X10-2c GPU拡張ラックをアクティブ化する必要があります。詳細は、「Oracle Private Cloud Appliance管理者ガイド」の「GPU拡張ノードの統合」を参照してください。