Configuration des commutateurs InfiniBand d'Oracle SPARC SuperCluster pour ajouter l'appareil ZFS Storage

Dans cette procédure, les GUID des ports HBA Infiniband de l'appareil ZFS Storage Appliance sont ajoutés à la configuration InfiniBand Oracle SPARC SuperCluster existante. En ajoutant ces ports et en utilisant une clé de partition de 8503, la communication entre les deux périphériques peut se produire.

1. Connectez-vous au commutateur Spine InfiniBand d'Oracle SPARC SuperCluster en tant qu'utilisateur root. Par défaut, le commutateur Spine reçoit le nom d'hôte <sscid>sw- ib1, où <sscid> correspond au nom de préfixe donné à l'ensemble du système Oracle SPARC SuperCluster. Dans l'exemple suivant, le <sscid> est aiessc.

   login as: root
   root@aiesscsw-ib1's password:
   Last login: Tue Sep 25 08:19:01 2013 from dhcp-brm-bl5-204-3e
   east-10-135-75-254.usdhcp.oraclecorp.com
   

2. Saisissez la commande enablesm pour vérifier que le commutateur exécute le gestionnaire de sous-réseau (ou cette commande lance le gestionnaire de sous-réseau).

   [root@aiesscsw-ib1 ~]# enablesm
   opensm (pid 15906) is already running...
   Starting partitiond daemon
   /usr/local/util/partitiond is already running
   (You may also perform a 'restart' if wanted)
   

3. Saisissez la commande getmaster pour vérifier qu'il s'agit du commutateur principal de la configuration. Si le commutateur principal n'est pas exécuté sur le commutateur Spine, déconnectez-vous et connectez-vous au commutateur principal désigné pour le reste de la procédure.

   [root@aiesscsw-ib1 ~]# getmaster
   Local SM enabled and running
   20130913 10:16:51 Master SubnetManager on sm lid 13 sm guid
   0x2128e8ac27a0a0 : SUN DCS 36P QDR aiesscsw-ib1.us.oracle.com
   [root@aiesscsw-ib1 ~]#
   

4. Sauvegardez la configuration du commutateur d'après les procédures de sauvegarde documentées (http://docs.oracle.com/cd/E26698_01/index.html).
5. Saisissez la commande smpartition list active pour vérifier que la clé de partition 0x0503 est assignée au nom de partition "sto" (sto = 0x0503).<br/> La clé de partition a été définie sur 8503 sur les liaisons de données de l'appareil ZFS Storage, mais le commutateur InfiniBand rapporte 0503. Cela est intentionnel car le protocole InfiniBand réserve le bit le plus significatif (0x8000) de la clé de partition hexadécimale (pkey) pour sa propre utilisation. Par conséquent, les pkeys 0x8503 et 0x0503 sont identiques.

   [root@aiesscsw-ib1 ~]# smpartition list active
   # Sun DCS IB partition config file
   # This file is generated, do not edit
   #! version_number : 11
   Default=0x7fff, ipoib : ALL_CAS=full, ALL_SWITCHES=full, SELF=
   full;
   SUN_DCS=0x0001, ipoib : ALL_SWITCHES=full;
   ic1s10 = 0x0501,ipoib,defmember=full:
   0x0021280001ef30f7,
   0x0021280001ef33bf,
   0x0021280001ef30b7,
   0x0021280001ef314b;
   ic2s10 = 0x0502,ipoib,defmember=full:
   0x0021280001ef30f8,
   0x0021280001ef33c0,
   0x0021280001ef30b8,
   0x0021280001ef314c;
   sto = 0x0503,ipoib,defmember=full:
   0x0021280001ef43f8,
   0x0021280001ef43b7,
   0x0021280001cf90c0,
   0x0021280001ef43bb,
   ...more...
   

6. Ajoutez l'appareil ZFS Storage à la configuration InfiniBand :
7. Saisissez la commande smpartition start pour démarrer une session de reconfiguration.

   # smpartition start<br/>
   [root@aiesscsw-ib1 ~]# smpartition start
   

8. Saisissez la commande smpartition add pour ajouter les huit nouveaux GUID à la configuration.

   # smpartition add -n sto -port <GUID1> <GUID2> <GUID3> ...  <GUID8><br/>
   [root@aiesscsw-ib1 ~]# smpartition add -n sto -port
   21280001ef43bb 21280001ef43bc 21280001cf90bf 21280001cf90c0
   21280001ef43f7 21280001ef43f8 21280001ef43b7 21280001ef43b8
   

9. Saisissez la commande smpartition list modified pour vérifier que les nouveaux GUID ont été ajoutés correctement.

   # smpartition list modified<br/>
   [root@aiesscsw-ib1 ~]# smpartition list modified
   # Sun DCS IB partition config file
   <nowki># This file is generated, do not edit
   #! version_number : 11
   Default=0x7fff, ipoib : ALL_CAS=full, ALL_SWITCHES=full, SELF=
   full;
   SUN_DCS=0x0001, ipoib : ALL_SWITCHES=full;
   ic1s10 = 0x0501,ipoib,defmember=full:
   0x0021280001ef30f7,
   0x0021280001ef33bf,
   0x0021280001ef30b7,
   0x0021280001ef314b;
   ic2s10 = 0x0502,ipoib,defmember=full:
   0x0021280001ef30f8,
   0x0021280001ef33c0,
   0x0021280001ef30b8,
   0x0021280001ef314c;
   sto = 0x0503,ipoib,defmember=full:
   0x0021280001ef43f8,
   0x0021280001ef43b7,
   0x0021280001cf90c0,
   0x0021280001ef43bb,
   0x0021280001ef43bc,
   0x0021280001cf90bf,
   0x0021280001ef43b8,
   0x0021280001ef43f7,
   0x0021280001ef3048,
   0x0021280001ef30af,
   0x0021280001ef30f8,
   0x0021280001ef30f7,
   0x0021280001ef33c0,
   0x0021280001ef33bf,
   0x0021280001ef30cc,
   0x0021280001ef342b,
   0x0021280001ef30b8,
   0x0021280001ef30b7,
   0x0021280001ef314c,
   0x0021280001ef314b,
   0x0021280001efec65,
   0x0021280001efec66,
   0x0021280001efecb1,
   0x0021280001efecb2;
   

10. Saisissez la commande smpartition commit pour appliquer la nouvelle configuration et propager les modifications de configuration à tous les commutateurs InfiniBand de la configuration.

    # smpartition commit<br/>
    [root@aiesscsw-ib1 ~]# smpartition commit
    [root@aiesscsw-ib1 ~]#
    

11. Déconnectez-vous du commutateur InfiniBand.
12. Sauvegardez la configuration InfiniBand d'après les procédures de sauvegarde documentées (documentation du commutateur Sun Datacenter InfiniBand).