SUN v880+FUJITSU E3000 无法打开MPXIO

quakerw

solaris10 08/07.本地6快盘,阵列上map过来3个lun.2块HBA卡,结果试了2种方法都无法打开mpxio.\r\n具体操作如下:\r\n一,修改/kernel/drv/fp.conf 打开HBA卡的mpxio,然后stmsboot -u\r\nroot@sun880a # ls -l /dev/fc\r\ntotal 6\r\nlrwxrwxrwx   1 root     root          51 Jul 24 21:58 fp0 -> ../../devices/pci@8,600000/SUNW,qlc@2/fp@0,0:devctl\r\nlrwxrwxrwx   1 root     root          56 Jul 24 21:58 fp1 -> ../../devices/pci@9,700000/fibre-channel@2/fp@0,0:devctl\r\nlrwxrwxrwx   1 root     root          56 Jul 24 21:58 fp2 -> ../../devices/pci@9,600000/fibre-channel@2/fp@0,0:devctl\r\nroot@sun880a # format\r\nSearching for disks...done\r\n\r\n\r\nAVAILABLE DISK SELECTIONS:\r\n       0. c1t0d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd571,0\r\n       1. c1t1d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w21000004cfd53624,0\r\n       2. c1t2d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bbed1,0\r\n       3. c1t3d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd281,0\r\n       4. c1t4d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd341,0\r\n       5. c1t5d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bc871,0\r\n       6. c2t220000E000A8170Ad0 <FUJITSU-E3000-0000 cyl 62498 alt 2 hd 64 sec 256>\r\n          /pci@9,700000/fibre-channel@2/fp@0,0/ssd@w220000e000a8170a,0\r\n       7. c2t220000E000A8170Ad1 <FUJITSU-E3000-0000 cyl 6248 alt 2 hd 64 sec 256>\r\n          /pci@9,700000/fibre-channel@2/fp@0,0/ssd@w220000e000a8170a,1\r\n       8. c2t220000E000A8170Ad2 <FUJITSU-E3000-0000 cyl 49967 alt 2 hd 64 sec 256>\r\n          /pci@9,700000/fibre-channel@2/fp@0,0/ssd@w220000e000a8170a,2\r\n       9. c3t250000E000A8170Ad0 <FUJITSU-E3000-0000 cyl 62498 alt 2 hd 64 sec 256>\r\n          /pci@9,600000/fibre-channel@2/fp@0,0/ssd@w250000e000a8170a,0\r\n      10. c3t250000E000A8170Ad1 <FUJITSU-E3000-0000 cyl 6248 alt 2 hd 64 sec 256>\r\n          /pci@9,600000/fibre-channel@2/fp@0,0/ssd@w250000e000a8170a,1\r\n      11. c3t250000E000A8170Ad2 <FUJITSU-E3000-0000 cyl 49967 alt 2 hd 64 sec 256>\r\n          /pci@9,600000/fibre-channel@2/fp@0,0/ssd@w250000e000a8170a,2\r\nSpecify disk (enter its number): ^D\r\nroot@sun880a # \r\n然后在/kernel/drv/fp.conf中添加HBA卡路径\r\nname=\"fp\" parent=\"/pci@9,600000/fibre-channel@2\" port=0 mpxio-disable=\"no\";\r\nname=\"fp\" parent=\"/pci@9,700000/fibre-channel@2\" port=0 mpxio-disable=\"no\";\r\n之后stmsboot -u;reboot -- -r\r\n失败\r\n\r\n二,在/kernel/drv/fp.conf中打开全局mpxio,然后将本地路径禁掉\r\n在fp.conf中添加\r\nname=\"fp\" parent=\"/pci@8,600000/SUNW,qlc@2\" port=0 mpxio-disable=\"yes\";\r\n然后将# To globally enable MPxIO on all fp ports set:\r\n# mpxio-disable=\"no\";\r\n注释打开\r\n之后stmsboot -e;reboot -- -r\r\n失败\r\n\r\n百思不得其解,求助

yangy27

fujitsu E3000存储对SUN来说属于第三方存储设备，所以在启用MPxIO时需要修改\r\n/kernel/drv/scsi_vhci.conf文件。\r\n\r\n具体如下：\r\n加入\r\ndevice-type-scsi-option-list = \"FUJITSU  E3000\", \"symmetric-option\" ;\r\nsymmetric-option = 0x1000000;\r\n\r\n注意点：FUJITSU和E3000之间必须是2个空格。\r\n\r\n新版本的Solaris 10又有新变化：\r\ndevice-type-scsi-option-list = \"FUJITSU  E3000\", \"enable-option\" ;\r\nenable-option = 0x1000000;\r\n\r\n请2种都测试一下，有结果及时分享。

yangy27

不好意思，说错了FUJITSU和E3000是1个空格

孔方兄

用FUJITSU存储的时候都是用FUJITSU自己的多路径软件，或者用veritas的DMP，都没有问题； LZ也可以试试；

quakerw

谢谢楼上各位，看来现在各位都认为问题出在array那块。嗯，下午去试试。2种方法，一种按楼上的各位说的来，第二就是直接扔给FUJITSU，你们的东西，你们自己搞定。。。。

quakerw

昏倒,合到是合起来了,只是多了一倍\r\n\r\nRSC version 2.2.3 (sun880a)\r\n\r\nPlease login: root\r\nPlease Enter password: \r\n\r\nrsc> console\r\n\r\nsun880a console login: root\r\nPassword: \r\nLast login: Tue Jul 29 14:56:30 from 192.168.1.66\r\nJul 29 15:01:20 sun880a login: ROOT LOGIN /dev/console\r\nSun Microsystems Inc.   SunOS 5.10      Generic January 2005\r\nSourcing //.profile-EIS.....\r\nroot@sun880a # \r\nroot@sun880a # \r\nroot@sun880a # \r\nroot@sun880a # format\r\nSearching for disks...done\r\n\r\n\r\nAVAILABLE DISK SELECTIONS:\r\n       0. c1t0d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd571,0\r\n       1. c1t1d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w21000004cfd53624,0\r\n       2. c1t2d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bbed1,0\r\n       3. c1t3d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd281,0\r\n       4. c1t4d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bd341,0\r\n       5. c1t5d0 <SUN72G cyl 14087 alt 2 hd 24 sec 424>\r\n          /pci@8,600000/SUNW,qlc@2/fp@0,0/ssd@w500000e0103bc871,0\r\n       6. c6t600E000000A800000053020400010000d0 <FUJITSU-E3000-0000 cyl 6248 alt 2 hd 64 sec 256>\r\n          /scsi_vhci/ssd@g600e000000a800000053020400010000\r\n       7. c6t600E000000A800000053020400000000d0 <FUJITSU-E3000-0000 cyl 62498 alt 2 hd 64 sec 256>\r\n          /scsi_vhci/ssd@g600e000000a800000053020400000000\r\n       8. c6t600E000000A800000053020400020000d0 <FUJITSU-E3000-0000 cyl 49967 alt 2 hd 64 sec 256>\r\n          /scsi_vhci/ssd@g600e000000a800000053020400020000\r\n       9. c6t46554A4954535520333030303032303430303032d0 <FUJITSU-E3000-0000 cyl 49967 alt 2 hd 64 sec 256>\r\n          /scsi_vhci/ssd@g46554a4954535520333030303032303430303032\r\n      10. c6t46554A4954535520333030303032303430303031d0 <FUJITSU-E3000-0000 cyl 6248 alt 2 hd 64 sec 256>\r\n          /scsi_vhci/ssd@g46554a4954535520333030303032303430303031\r\n      11. c6t46554A4954535520333030303032303430303030d0 <FUJITSU-E3000-0000 cyl 62498 alt 2 hd 64 sec 256>\r\n          /scsi_vhci/ssd@g46554a4954535520333030303032303430303030\r\nSpecify disk (enter its number): \r\n\r\n郁闷了

孔方兄

富士通也没有理由一定支持mpxio吧？ \r\n\r\n你用VM的话建议用DMP好了；这个最简单，加载个富士通的E3000阵列的lib，不过E3000的阵列只能支持多路径的主备，不支持AA的负载均衡模式，不过也够用了；\r\n\r\n或者你就用富士通自己的多路径好了；不过这个除了阵列外，对于HBA卡有要求，富士通的HBA卡或者Emulex的卡；\r\n\r\n不同厂商有时候是比较烦的。。曾经遇到过SUN的T3阵列在IBM的小机上啥都好了，也认到了；就是不能newfs的问题。。。兼容性列表有的；IBM和SUN的人都搞不定，最好只好改方案，调整存储，把一台EMC的4700接过来；

todaypuzzleme

富士通的多路径软件要求HBA卡是富士通和Emulex的，qlogic的不行吗？孔方兄是不是验证过这个问题了，刚好有个客户用qlogic的卡连E4K作RAC,希望能解答一下

yangy27

Qlogic 的卡+FUJITSU E4K有2种多路径解决方案：MPxIO 或DMP,\r\n如果是跑RAC的话，建议使用DMP，另外DMP已支持E4K active/active模式，\r\n要到veritas下载针对FUJITSUE4K的驱动包。

yangy27

LZ是不是上海某家游戏厂家？