所有交换机要求相同的CPU架构和相同的OS版本
- 在其中一台交换机上创建subnet并指定VIP:
[standalone: master] (config) # ib ha hpc ip 192.168.1.10 255.255.255.0
[hpc: master] (config) # - 在其它交换机上加入subnet:
[standalone: master] (config) # ib ha hpc
[hpc: standby] (config) # - 通过第一步设置的VIP设置SM
所有交换机要求相同的CPU架构和相同的OS版本
一台DDN 7700X,双控,每个控制器两个FDR IB口。两台IO节点,每台两个双口FDR IB卡,一个卡双口与存储两个控制器连接,另一个卡单口与集群IB网络连接。
存储和IO节点间是IB直接连接的,没有通过交换机,每条IB链路都是独立的,所以在每条IB链路上都需要有subnet manager。因每个opensm进程只能绑定一个物理端口,而 service opensmd 只能启动一个opensm进程,所以只能在每个io节点上启动两个opensm专门用于管理存储IB链路。
首先用ibstat查一下和存储连接IB口的Port GUID,在/etc/rc.local中添加opensm并且绑定guid,注意前面的sleep是必须的,否则opensm启动失败。
sleep 30 /usr/sbin/opensm -B -g 0x7cfe900300a8bf41 /usr/sbin/opensm -B -g 0x7cfe900300a8bf42