配置 Oracle SPARC SuperCluster InfiniBand 交换机以添加 ZFS Storage Appliance

在此过程中，ZFS Storage Appliance Infiniband HBA 的 GUID 将添加到现有的 Oracle SPARC SuperCluster InfiniBand 配置中。通过添加这些端口并使用分区键 8503，可实现这两个设备之间的通信。

1. 以 root 身份登录 Oracle SPARC SuperCluster InfiniBand 中心交换机。默认情况下，将为此中心交换机提供一个主机名 <sscid>sw- ib1，其中，<sscid> 是提供给整个 Oracle SPARC SuperCluster 系统的前缀名。在下例中，<sscid> 是 aiessc。

   login as: root
   root@aiesscsw-ib1's password:
   Last login: Tue Sep 25 08:19:01 2013 from dhcp-brm-bl5-204-3e
   east-10-135-75-254.usdhcp.oraclecorp.com
   

2. 输入命令 enablesm 以确认此交换机正在运行子网管理器（如未运行，则此命令将启动子网管理器）。

   [root@aiesscsw-ib1 ~]# enablesm
   opensm (pid 15906) is already running...
   Starting partitiond daemon
   /usr/local/util/partitiond is already running
   (You may also perform a 'restart' if wanted)
   

3. 输入命令 getmaster 以确认这是配置的主交换机。如果此主交换机未在中心交换机上运行，请注销后再次登录指定主交换机，以处理此过程的剩余部分。

   [root@aiesscsw-ib1 ~]# getmaster
   Local SM enabled and running
   20130913 10:16:51 Master SubnetManager on sm lid 13 sm guid
   0x2128e8ac27a0a0 : SUN DCS 36P QDR aiesscsw-ib1.us.oracle.com
   [root@aiesscsw-ib1 ~]#
   

4. 根据记录的备份过程备份交换机配置 (http://docs.oracle.com/cd/E26698_01/index.html)。
5. 输入命令 smpartition list active 以确认分区键 0x0503 已分配给分区名称 "sto" (sto = 0x0503)。<br/> 分区键在 ZFS Storage Appliance 数据链路上设置为 8503，但 InfiniBand 交换机报告为 0503。这是有意如此，因为 InfiniBand 协议保留十六进制分区键 (partition key, pkey) 的最高有效位 (0x8000) 供自己使用。因此，pkey 0x8503 和 0x0503 是相同的。

   [root@aiesscsw-ib1 ~]# smpartition list active
   # Sun DCS IB partition config file
   # This file is generated, do not edit
   #! version_number : 11
   Default=0x7fff, ipoib : ALL_CAS=full, ALL_SWITCHES=full, SELF=
   full;
   SUN_DCS=0x0001, ipoib : ALL_SWITCHES=full;
   ic1s10 = 0x0501,ipoib,defmember=full:
   0x0021280001ef30f7,
   0x0021280001ef33bf,
   0x0021280001ef30b7,
   0x0021280001ef314b;
   ic2s10 = 0x0502,ipoib,defmember=full:
   0x0021280001ef30f8,
   0x0021280001ef33c0,
   0x0021280001ef30b8,
   0x0021280001ef314c;
   sto = 0x0503,ipoib,defmember=full:
   0x0021280001ef43f8,
   0x0021280001ef43b7,
   0x0021280001cf90c0,
   0x0021280001ef43bb,
   ...more...
   

6. 将 ZFS Storage Appliance 添加到 InfiniBand 配置：
7. 输入命令 smpartition start 以启动重新配置会话。

   # smpartition start<br/>
   [root@aiesscsw-ib1 ~]# smpartition start
   

8. 输入命令 smpartition add 以将八个新 GUID 添加到配置中。

   # smpartition add -n sto -port <GUID1> <GUID2> <GUID3> ...  <GUID8><br/>
   [root@aiesscsw-ib1 ~]# smpartition add -n sto -port
   21280001ef43bb 21280001ef43bc 21280001cf90bf 21280001cf90c0
   21280001ef43f7 21280001ef43f8 21280001ef43b7 21280001ef43b8
   

9. 输入命令 smpartition list modified 以确认已正确添加了新 GUID。

   # smpartition list modified<br/>
   [root@aiesscsw-ib1 ~]# smpartition list modified
   # Sun DCS IB partition config file
   <nowki># This file is generated, do not edit
   #! version_number : 11
   Default=0x7fff, ipoib : ALL_CAS=full, ALL_SWITCHES=full, SELF=
   full;
   SUN_DCS=0x0001, ipoib : ALL_SWITCHES=full;
   ic1s10 = 0x0501,ipoib,defmember=full:
   0x0021280001ef30f7,
   0x0021280001ef33bf,
   0x0021280001ef30b7,
   0x0021280001ef314b;
   ic2s10 = 0x0502,ipoib,defmember=full:
   0x0021280001ef30f8,
   0x0021280001ef33c0,
   0x0021280001ef30b8,
   0x0021280001ef314c;
   sto = 0x0503,ipoib,defmember=full:
   0x0021280001ef43f8,
   0x0021280001ef43b7,
   0x0021280001cf90c0,
   0x0021280001ef43bb,
   0x0021280001ef43bc,
   0x0021280001cf90bf,
   0x0021280001ef43b8,
   0x0021280001ef43f7,
   0x0021280001ef3048,
   0x0021280001ef30af,
   0x0021280001ef30f8,
   0x0021280001ef30f7,
   0x0021280001ef33c0,
   0x0021280001ef33bf,
   0x0021280001ef30cc,
   0x0021280001ef342b,
   0x0021280001ef30b8,
   0x0021280001ef30b7,
   0x0021280001ef314c,
   0x0021280001ef314b,
   0x0021280001efec65,
   0x0021280001efec66,
   0x0021280001efecb1,
   0x0021280001efecb2;
   

10. 输入命令 smpartition commit 以应用新配置并将配置更改传播到配置中的所有 InfiniBand 交换机。

    # smpartition commit<br/>
    [root@aiesscsw-ib1 ~]# smpartition commit
    [root@aiesscsw-ib1 ~]#
    

11. 注销 InfiniBand 交换机。
12. 根据记录的备份过程（Sun Datacenter InfiniBand Switch Documentation（Sun 数据中心 InfiniBand 交换机文档））备份 InfiniBand 配置。