この章では、Oracle Exalytics In-Memory MachineとOracle Exadata Database Machineを同じInfiniBandファブリックで一緒に接続する方法について説明します。
次のトピックが含まれます:
このセクションの内容は次のとおりです。
各Oracle Exalytics In-Memory Machineには、2ポートのQDR InfiniBandホスト・チャネル・アダプタ(HCA)などのInfiniBandカードが付属しています。このカードのMellanox部品番号はMHQH29B-XTRです。
このInfiniBandカードは、Oracle Exalytics In-Memory MachineのPCIeスロット6に入れます。
Oracle Exadata Database Machineに付属の5mの予備用InfiniBandケーブルを使用できます。サポートが必要な場合は、オラクル社のサポート担当者にお問い合せください。Oracle Exalytics In-Memory MachineとOracle Exadata Database Machineを同じInfiniBandファブリックで接続するには、これらのケーブルが必要です。
Oracle Exadata Database Machineには、36ポートのInfiniBandリーフ・スイッチ(Sun Datacenter QDR InfiniBand Switch 36)が2個付属しています。ラックの中央にあるこの2つのスイッチをリーフ・スイッチといいます。スパイン・スイッチは、Oracle Exadata Database Machineのフル・ラック構成およびハーフ・ラック構成のユニット1にあります。
注意: このドキュメントでは、Oracle Exadata Database Machineラックの下部ユニットにあるリーフ・スイッチをリーフ1と呼びます。Oracle Exadata Database Machineラックのリーフ1の上にあるリーフ・スイッチをリーフ2と呼びます。 Oracle Exadata Database Machineラックのレイアウトとハードウェア・コンポーネントの詳細は、Oracle Exadata Database Machineオーナーズ・ガイドを参照してください。 |
この項では、次の項目について説明します。
シナリオ1: 1台のExalytics In-Memory MachineとOracle Exadata Database Machine
シナリオ2: クラスタ化されたExalytics In-Memory MachineとOracle Exadata Database Machine
Oracle Exalytics In-Memory Machineを格納するラックとOracle Exadata Database Machineラックは、データ・センターに並べて配置することが前提になります。データ・センターにラックを配置する際に、接続するInfiniBandケーブルの長さに注意してください。Oracle Exadata Database MachineラックにOracle Exalytics In-Memory Machineを置かないでください。
図7-1に、1台の(非クラスタ化)Oracle Exalytics In-Memory MachineをOracle Exadata Database Machineラックに接続する状況を示します。
図7-1 Oracle Exadata Database Machineに接続する非クラスタ化Oracle Exalytics In-Memory Machine
高可用性を実現するため、Oracle Exalytics In-Memory Machineに挿入されるInfiniBandカードの2つのポートを、Oracle Exadata Database Machineの個々のリーフ・スイッチに接続します。たとえば、図7-1に示すように、Oracle Exalytics In-Memory MachineのInfiniBandカードのポート1を、リーフ1スイッチ(Oracle Exadata Database Machineの下部ユニットに設置されているSun Datacenter InfiniBand Switch 36)に接続できます。また、Oracle Exalytics In-Memory MachineのInfiniBandカードのポート2を、リーフ2スイッチ(Oracle Exadata Database Machineの上部ユニットに設置されているSun Datacenter InfiniBand Switch 36)に接続する必要があります。ポート1はアクティブ・ポートとして機能し、ポート2はパッシブ・ポートとして機能します。
注意: Oracle Exadata Database Machineのリーフ・スイッチでは、次の空きポートを使用できます。 ポート5B、6A、6B、7A、7B、12A |
図7-2に、Oracle Exalytics In-Memory MachineのクラスタをOracle Exadata Database Machineラックに接続する状況を示します。
図7-2 Oracle Exadata Database Machineに接続するクラスタ化Oracle Exalytics In-Memory Machine
高可用性を実現するため、各Oracle Exalytics In-Memory Machineに付属のInfiniBandカードのアクティブ・ポートを、リーフ1スイッチ(Oracle Exadata Database Machineの下部ユニットに設置されているSun Datacenter InfiniBand Switch 36)に接続します。また、各Oracle Exalytics In-Memory Machineに付属のInfiniBandカードのパッシブ・ポートを、リーフ2スイッチ(Oracle Exadata Database Machineの上部ユニットに設置されているSun Datacenter InfiniBand Switch 36)に接続する必要があります。ポート1はアクティブ・ポートとして機能し、ポート2はパッシブ・ポートとして機能します。
注意: Oracle Exadata Database Machineのリーフ・スイッチでは、次の空きポートを使用できます。 ポート5B、6A、6B、7A、7B、12A |
各InfiniBandネットワークには、サブネット・マネージャ(SM)が必要です。使用するファブリックのOracle Exadata Database Machineのいずれかのリーフ・スイッチで実行するSMを使用できます。
InfiniBandスイッチの使用の詳細は、次のドキュメントを参照してください。
InfiniBandネットワークのサポートに必要なカーネル・モジュールは、Oracle Exalytics In-Memory MachineにあらかじめインストールされているOracle Linuxベース・オペレーティング・システムによってロードされます。
InfiniBandファブリックの様々な面を監視するには、Oracle Exadata Database Machineに付属のSun Datacenter InfiniBand Switch 36でInfiniBandコマンドを実行します。
これらのコマンドの詳細は、Sun Datacenter InfiniBand Switch 36コマンド・リファレンスを参照してください。
InfiniBandネットワーク接続を確立すると、スイッチのCLIでibstat
コマンドを使用してInfiniBandリンクのステータスを確認できます。
ibstat
コマンドでは、次の例のように基本ステータスが表示されます。
# ibstat Switch 'is4_0' Switch type: MT48436 Number of ports: 0 Firmware version: 7.3.0 Hardware version: a0 Node GUID: 0x00212856cfe2c0a0 System image GUID: 0x00212856cfe2c0a3 Port 0: State: Active Physical state: LinkUp Rate: 40 Base lid: 16 LMC: 0 SM lid: 16 Capability mask: 0x4250084a Port GUID: 0x00212856cfe2c0a0
接続するポートの物理状態はLinkUp
で示されます。
InfiniBandネットワークの基本接続を確認したら、スイッチのCLIでibhosts
、ibswitches
およびibnetdiscover
の各コマンドを実行できます。
ibhosts
コマンドでは、InfiniBandファブリックのホスト・ノードが表示され、ibswitches
コマンドでは、ファブリック内のInfiniBandスイッチ・ノードが表示されます。また、ibnetdiscover
コマンドでは、InfiniBandトポロジが検出されます。
このような監視と診断コマンドの詳細は、Sun Datacenter InfiniBand Switch 36コマンド・リファレンスを参照してください。