SUN v880+FUJITSU E3000 无法打开MPXIO

quakerw

solaris10 08/07.本地6快盘,阵列上map过来3个lun.2块HBA卡,结果试了2种方法都无法打开mpxio.
具体操作如下:
一,修改/kernel/drv/fp.conf 打开HBA卡的mpxio,然后stmsboot -u
root@sun880a # ls -l /dev/fc
total 6
lrwxrwxrwx   1 root     root          51 Jul 24 21:58 fp0 -> ../../devices/pci@8,600000/SUNW,qlc@2/fp@0,0:devctl
lrwxrwxrwx   1 root     root          56 Jul 24 21:58 fp1 -> ../../devices/pci@9,700000/fibre-channel@2/fp@0,0:devctl
lrwxrwxrwx   1 root     root          56 Jul 24 21:58 fp2 -> ../../devices/pci@9,600000/fibre-channel@2/fp@0,0:devctl
root@sun880a # format
Searching for disks...done


AVAILABLE DISK SELECTIONS:
       0. c1t0d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd571,0
       1. c1t1d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w21000004cfd53624,0
       2. c1t2d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bbed1,0
       3. c1t3d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd281,0
       4. c1t4d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd341,0
       5. c1t5d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bc871,0
       6. c2t220000E000A8170Ad0 <FUJITSU-E3000-0000 cyl 62498 alt 2 hd 64 sec 256>
          /pci@9,700000/fibre-channel@2/fp@0,0/ssd@w220000e000a8170a,0
       7. c2t220000E000A8170Ad1 <FUJITSU-E3000-0000 cyl 6248 alt 2 hd 64 sec 256>
          /pci@9,700000/fibre-channel@2/fp@0,0/ssd@w220000e000a8170a,1
       8. c2t220000E000A8170Ad2 <FUJITSU-E3000-0000 cyl 49967 alt 2 hd 64 sec 256>
          /pci@9,700000/fibre-channel@2/fp@0,0/ssd@w220000e000a8170a,2
       9. c3t250000E000A8170Ad0 <FUJITSU-E3000-0000 cyl 62498 alt 2 hd 64 sec 256>
          /pci@9,600000/fibre-channel@2/fp@0,0/ssd@w250000e000a8170a,0
      10. c3t250000E000A8170Ad1 <FUJITSU-E3000-0000 cyl 6248 alt 2 hd 64 sec 256>
          /pci@9,600000/fibre-channel@2/fp@0,0/ssd@w250000e000a8170a,1
      11. c3t250000E000A8170Ad2 <FUJITSU-E3000-0000 cyl 49967 alt 2 hd 64 sec 256>
          /pci@9,600000/fibre-channel@2/fp@0,0/ssd@w250000e000a8170a,2
Specify disk (enter its number): ^D
root@sun880a #
然后在/kernel/drv/fp.conf中添加HBA卡路径
name="fp" parent="/pci@9,600000/fibre-channel@2" port=0 mpxio-disable="no";
name="fp" parent="/pci@9,700000/fibre-channel@2" port=0 mpxio-disable="no";
之后stmsboot -u;reboot -- -r
失败

二,在/kernel/drv/fp.conf中打开全局mpxio,然后将本地路径禁掉
在fp.conf中添加
name="fp" parent="/pci@8,600000/SUNW,qlc@2" port=0 mpxio-disable="yes";
然后将# To globally enable MPxIO on all fp ports set:
# mpxio-disable="no";
注释打开
之后stmsboot -e;reboot -- -r
失败

百思不得其解,求助

todaypuzzleme

觉得LZ的配置有问题，参考这个http://bbs.chinaunix.net/viewthr ... p%3Bfilter%3Ddigest

quakerw

原帖由 todaypuzzleme 于 2008-7-28 18:01 发表
觉得LZ的配置有问题，参考这个http://bbs.chinaunix.net/viewthr ... p%3Bfilter%3Ddigest

谢谢ls的，我回去试试。因为之前不太清楚如何查看producr ID之类的，而且我也看过篇文档，说IBM的array需要改，而富士通的不需要。嗯，总的来说感谢，至少提供了思路~

yangy27

fujitsu E3000存储对SUN来说属于第三方存储设备，所以在启用MPxIO时需要修改
/kernel/drv/scsi_vhci.conf文件。

具体如下：
加入
device-type-scsi-option-list = "FUJITSU  E3000", "symmetric-option" ;
symmetric-option = 0x1000000;

注意点：FUJITSU和E3000之间必须是2个空格。

新版本的Solaris 10又有新变化：
device-type-scsi-option-list = "FUJITSU  E3000", "enable-option" ;
enable-option = 0x1000000;

请2种都测试一下，有结果及时分享。

yangy27

不好意思，说错了FUJITSU和E3000是1个空格

孔方兄

用FUJITSU存储的时候都是用FUJITSU自己的多路径软件，或者用veritas的DMP，都没有问题； LZ也可以试试；

quakerw

谢谢楼上各位，看来现在各位都认为问题出在array那块。嗯，下午去试试。2种方法，一种按楼上的各位说的来，第二就是直接扔给FUJITSU，你们的东西，你们自己搞定。。。。

quakerw

昏倒,合到是合起来了,只是多了一倍

RSC version 2.2.3 (sun880a)

Please login: root
Please Enter password:

rsc> console

sun880a console login: root
Password:
Last login: Tue Jul 29 14:56:30 from 192.168.1.66
Jul 29 15:01:20 sun880a login: ROOT LOGIN /dev/console
Sun Microsystems Inc.   SunOS 5.10      Generic January 2005
Sourcing //.profile-EIS.....
root@sun880a #
root@sun880a #
root@sun880a #
root@sun880a # format
Searching for disks...done


AVAILABLE DISK SELECTIONS:
       0. c1t0d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd571,0
       1. c1t1d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w21000004cfd53624,0
       2. c1t2d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bbed1,0
       3. c1t3d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd281,0
       4. c1t4d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd341,0
       5. c1t5d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>
          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bc871,0
       6. c6t600E000000A800000053020400010000d0 <FUJITSU-E3000-0000 cyl 6248 alt 2 hd 64 sec 256>
          /scsi_vhci/ssd@g600e000000a800000053020400010000
       7. c6t600E000000A800000053020400000000d0 <FUJITSU-E3000-0000 cyl 62498 alt 2 hd 64 sec 256>
          /scsi_vhci/ssd@g600e000000a800000053020400000000
       8. c6t600E000000A800000053020400020000d0 <FUJITSU-E3000-0000 cyl 49967 alt 2 hd 64 sec 256>
          /scsi_vhci/ssd@g600e000000a800000053020400020000
       9. c6t46554A4954535520333030303032303430303032d0 <FUJITSU-E3000-0000 cyl 49967 alt 2 hd 64 sec 256>
          /scsi_vhci/ssd@g46554a4954535520333030303032303430303032
      10. c6t46554A4954535520333030303032303430303031d0 <FUJITSU-E3000-0000 cyl 6248 alt 2 hd 64 sec 256>
          /scsi_vhci/ssd@g46554a4954535520333030303032303430303031
      11. c6t46554A4954535520333030303032303430303030d0 <FUJITSU-E3000-0000 cyl 62498 alt 2 hd 64 sec 256>
          /scsi_vhci/ssd@g46554a4954535520333030303032303430303030
Specify disk (enter its number):

郁闷了

孔方兄

富士通也没有理由一定支持mpxio吧？

你用VM的话建议用DMP好了；这个最简单，加载个富士通的E3000阵列的lib，不过E3000的阵列只能支持多路径的主备，不支持AA的负载均衡模式，不过也够用了；

或者你就用富士通自己的多路径好了；不过这个除了阵列外，对于HBA卡有要求，富士通的HBA卡或者Emulex的卡；

不同厂商有时候是比较烦的。。曾经遇到过SUN的T3阵列在IBM的小机上啥都好了，也认到了；就是不能newfs的问题。。。兼容性列表有的；IBM和SUN的人都搞不定，最好只好改方案，调整存储，把一台EMC的4700接过来；

todaypuzzleme

富士通的多路径软件要求HBA卡是富士通和Emulex的，qlogic的不行吗？孔方兄是不是验证过这个问题了，刚好有个客户用qlogic的卡连E4K作RAC,希望能解答一下