Configuración de los conmutadores InfiniBand de Oracle SPARC SuperCluster para agregar el dispositivo ZFS Storage Appliance

En este procedimiento, se agregan los GUID de los puertos InifiniBand del HBA de ZFS Storage Appliance a la configuración de InfiniBand existente de Oracle SPARC SuperCluster. Al agregar estos puertos y usar la clave de partición 8503, se puede establecer la comunicación entre los dos dispositivos.

1. Inicie sesión en el switch de interconexión de racks InfiniBand de Oracle SPARC SuperCluster como root. De manera predeterminada, el switch de interconexión de racks recibe el nombre de host <sscid>sw- ib1, donde <sscid> es el nombre del prefijo asignado al sistema Oracle SPARC SuperCluster. En el siguiente ejemplo, <sscid> es aiessc.

   login as: root
   root@aiesscsw-ib1's password:
   Last login: Tue Sep 25 08:19:01 2013 from dhcp-brm-bl5-204-3e
   east-10-135-75-254.usdhcp.oraclecorp.com
   

2. Introduzca el comando enablesm para verificar que el conmutador esté ejecutando el gestor de subred (si no se está ejecutando, el comando sirve para iniciarlo).

   [root@aiesscsw-ib1 ~]# enablesm
   opensm (pid 15906) is already running...
   Starting partitiond daemon
   /usr/local/util/partitiond is already running
   (You may also perform a 'restart' if wanted)
   

3. Introduzca el comando getmaster para verificar que este sea el conmutador maestro de la configuración. Si el conmutador maestro no se está ejecutando en el switch de interconexión de racks, cierre sesión e inicie sesión en el conmutador maestro designado para llevar a cabo el resto de este procedimiento.

   [root@aiesscsw-ib1 ~]# getmaster
   Local SM enabled and running
   20130913 10:16:51 Master SubnetManager on sm lid 13 sm guid
   0x2128e8ac27a0a0 : SUN DCS 36P QDR aiesscsw-ib1.us.oracle.com
   [root@aiesscsw-ib1 ~]#
   

4. Use los procedimientos de copia de seguridad documentados (http://docs.oracle.com/cd/E26698_01/index.html) para hacer la copia de seguridad de la configuración del conmutador.
5. Introduzca el comando smpartition list active para verificar que la clave de partición 0x0503 esté asignada al nombre de partición "sto" (sto = 0x0503).<br/> La clave de partición se configuró con el valor 8503 en los enlaces de datos del dispositivo ZFS Storage Appliance, pero el conmutador de InfiniBand indica 0503. Esto es intencional porque el protocolo InfiniBand reserva el bit más importante (0x8000) de la clave de partición (pkey) hexadecimal para su propio uso. Por lo tanto, las pkey 0x8503 y 0x0503 son iguales.

   [root@aiesscsw-ib1 ~]# smpartition list active
   # Sun DCS IB partition config file
   # This file is generated, do not edit
   #! version_number : 11
   Default=0x7fff, ipoib : ALL_CAS=full, ALL_SWITCHES=full, SELF=
   full;
   SUN_DCS=0x0001, ipoib : ALL_SWITCHES=full;
   ic1s10 = 0x0501,ipoib,defmember=full:
   0x0021280001ef30f7,
   0x0021280001ef33bf,
   0x0021280001ef30b7,
   0x0021280001ef314b;
   ic2s10 = 0x0502,ipoib,defmember=full:
   0x0021280001ef30f8,
   0x0021280001ef33c0,
   0x0021280001ef30b8,
   0x0021280001ef314c;
   sto = 0x0503,ipoib,defmember=full:
   0x0021280001ef43f8,
   0x0021280001ef43b7,
   0x0021280001cf90c0,
   0x0021280001ef43bb,
   ...more...
   

6. Agregue el dispositivo ZFS Storage Appliance a la configuración de InfiniBand:
7. Introduzca el comando smpartition start para iniciar una sesión de reconfiguración.

   # smpartition start<br/>
   [root@aiesscsw-ib1 ~]# smpartition start
   

8. Introduzca el comando smpartition add para agregar los ocho nuevos GUID a la configuración.

   # smpartition add -n sto -port <GUID1> <GUID2> <GUID3> ...  <GUID8><br/>
   [root@aiesscsw-ib1 ~]# smpartition add -n sto -port
   21280001ef43bb 21280001ef43bc 21280001cf90bf 21280001cf90c0
   21280001ef43f7 21280001ef43f8 21280001ef43b7 21280001ef43b8
   

9. Introduzca el comando smpartition list modified para verificar que los nuevos GUID se hayan agregado correctamente.

   # smpartition list modified<br/>
   [root@aiesscsw-ib1 ~]# smpartition list modified
   # Sun DCS IB partition config file
   <nowki># This file is generated, do not edit
   #! version_number : 11
   Default=0x7fff, ipoib : ALL_CAS=full, ALL_SWITCHES=full, SELF=
   full;
   SUN_DCS=0x0001, ipoib : ALL_SWITCHES=full;
   ic1s10 = 0x0501,ipoib,defmember=full:
   0x0021280001ef30f7,
   0x0021280001ef33bf,
   0x0021280001ef30b7,
   0x0021280001ef314b;
   ic2s10 = 0x0502,ipoib,defmember=full:
   0x0021280001ef30f8,
   0x0021280001ef33c0,
   0x0021280001ef30b8,
   0x0021280001ef314c;
   sto = 0x0503,ipoib,defmember=full:
   0x0021280001ef43f8,
   0x0021280001ef43b7,
   0x0021280001cf90c0,
   0x0021280001ef43bb,
   0x0021280001ef43bc,
   0x0021280001cf90bf,
   0x0021280001ef43b8,
   0x0021280001ef43f7,
   0x0021280001ef3048,
   0x0021280001ef30af,
   0x0021280001ef30f8,
   0x0021280001ef30f7,
   0x0021280001ef33c0,
   0x0021280001ef33bf,
   0x0021280001ef30cc,
   0x0021280001ef342b,
   0x0021280001ef30b8,
   0x0021280001ef30b7,
   0x0021280001ef314c,
   0x0021280001ef314b,
   0x0021280001efec65,
   0x0021280001efec66,
   0x0021280001efecb1,
   0x0021280001efecb2;
   

10. Introduzca el comando smpartition commit para aplicar la nueva configuración y propagar los cambios de configuración a todos los conmutadores InfiniBand de la configuración.

    # smpartition commit<br/>
    [root@aiesscsw-ib1 ~]# smpartition commit
    [root@aiesscsw-ib1 ~]#
    

11. Cierre la sesión del conmutador InfiniBand.
12. Use los procedimientos de copia de seguridad documentados Sun Datacenter InfiniBand Switch Documentation para hacer la copia de seguridad de la configuración de InfiniBand.