Sun cluser metastat 硬盘错误！

水木清华

硬件配置 :二台T2000 server , 二台SE3320 磁盘阵列 每块300G硬盘
软件 :solaris 10   sun cluster3.1_u4
   
   问题: 将sun cluster 环境中SE3320 6块300G硬盘替换在metastat 中看到的6块需要维护的硬盘，重新做了d50 和d40 这两个卷，问题还是存在，messages中报错硬盘的错误，但是可以读写数据，不影响读写，只是在读写的时候会出现硬盘报错信息， 所以这应该不是硬盘损坏导致的，请帮助，谢谢!
#metastat -s dg-psmf
dg-psmf/d60: Mirror
    Submirror 0: dg-psmf/d61
      State: Okay         
    Submirror 1: dg-psmf/d62
      State: Okay         
    Pass: 1
    Read option: roundrobin (default)
    Write option: parallel (default)
    Size: 2929229824 blocks (1.4 TB)

dg-psmf/d61: Submirror of dg-psmf/d60
    State: Okay         
    Size: 2929237500 blocks (1.4 TB)
    Stripe 0: (interlace: 32 blocks)
        Device   Start Block  Dbase        State Reloc Hot Spare
        d11s6           0     No            Okay   No  
        d12s6           0     No            Okay   No  
        d13s6           0     No            Okay   No  
        d14s6           0     No            Okay   No  
        d15s6           0     No            Okay   No  


dg-psmf/d62: Submirror of dg-psmf/d60
    State: Okay         
    Size: 2929237500 blocks (1.4 TB)
    Stripe 0: (interlace: 32 blocks)
        Device   Start Block  Dbase        State Reloc Hot Spare
        d23s6           0     No            Okay   No  
        d24s6           0     No            Okay   No  
        d25s6           0     No            Okay   No  
        d26s6           0     No            Okay   No  
        d27s6           0     No            Okay   No  


dg-psmf/d50: Mirror
    Submirror 0: dg-psmf/d51
      State: Needs maintenance
    Submirror 1: dg-psmf/d52
      State: Needs maintenance
    Pass: 1
    Read option: roundrobin (default)
    Write option: parallel (default)
    Size: 1757537500 blocks (838 GB)

dg-psmf/d51: Submirror of dg-psmf/d50
    State: Needs maintenance
    Invoke: metareplace dg-psmf/d50 d9s6 <new device>
    Size: 1757537500 blocks (838 GB)
    Stripe 0: (interlace: 32 blocks)
        Device   Start Block  Dbase        State Reloc Hot Spare
        d8s6            0     No     Maintenance   No  
        d9s6            0     No     Maintenance   No  
        d10s6           0     No      Last Erred   No  


dg-psmf/d52: Submirror of dg-psmf/d50
    State: Needs maintenance
    Invoke: metareplace dg-psmf/d50 d22s6 <new device>
    Size: 1757537500 blocks (838 GB)
    Stripe 0: (interlace: 32 blocks)
        Device   Start Block  Dbase        State Reloc Hot Spare
        d20s6           0     No            Okay   No  
        d21s6           0     No            Okay   No  
        d22s6           0     No     Maintenance   No  


dg-psmf/d40: Mirror
    Submirror 0: dg-psmf/d41
      State: Needs maintenance
    Submirror 1: dg-psmf/d42
      State: Okay         
    Pass: 1
    Read option: roundrobin (default)
    Write option: parallel (default)
    Size: 1171687500 blocks (558 GB)

dg-psmf/d41: Submirror of dg-psmf/d40
    State: Needs maintenance
    Invoke: metareplace dg-psmf/d40 d6s6 <new device>
    Size: 1171687500 blocks (558 GB)
    Stripe 0: (interlace: 32 blocks)
        Device   Start Block  Dbase        State Reloc Hot Spare
        d6s6            0     No     Maintenance   No  
        d7s6            0     No     Maintenance   No  


dg-psmf/d42: Submirror of dg-psmf/d40
    State: Okay         
    Size: 1171687500 blocks (558 GB)
    Stripe 0: (interlace: 32 blocks)
        Device   Start Block  Dbase        State Reloc Hot Spare
        d18s6           0     No            Okay   No  
        d19s6           0     No            Okay   No  


dg-psmf/d30: Mirror
    Submirror 0: dg-psmf/d31
      State: Okay         
    Submirror 1: dg-psmf/d32
      State: Okay         
    Pass: 1
    Read option: roundrobin (default)
    Write option: parallel (default)
    Size: 585850000 blocks (279 GB)

dg-psmf/d31: Submirror of dg-psmf/d30
    State: Okay         
    Size: 585850000 blocks (279 GB)
    Stripe 0:
        Device   Start Block  Dbase        State Reloc Hot Spare
        d5s4            0     No            Okay   No  


dg-psmf/d32: Submirror of dg-psmf/d30
    State: Okay         
    Size: 585850000 blocks (279 GB)
    Stripe 0:
        Device   Start Block  Dbase        State Reloc Hot Spare
        d17s4           0     No            Okay   No  


dg-psmf/d100: Mirror
    Submirror 0: dg-psmf/d101
      State: Okay         
    Submirror 1: dg-psmf/d102
      State: Okay         
    Pass: 1
    Read option: roundrobin (default)
    Write option: parallel (default)
    Size: 585850000 blocks (279 GB)

dg-psmf/d101: Submirror of dg-psmf/d100
    State: Okay         
    Size: 585850000 blocks (279 GB)
    Stripe 0:
        Device   Start Block  Dbase        State Reloc Hot Spare
        d4s4            0     No            Okay   No  


dg-psmf/d102: Submirror of dg-psmf/d100
    State: Okay         
    Size: 585850000 blocks (279 GB)
    Stripe 0:
        Device   Start Block  Dbase        State Reloc Hot Spare
        d16s4           0     No            Okay   No  


Device Relocation Information:
Device   Reloc        Device ID
d6    No           -
d7    No           -
d23   No           -
d24   No           -
d25   No           -
d26   No           -
d27   No           -
d11   No           -
d12   No           -
d13   No           -
d14   No           -
d15   No           -
d20   No           -
d21   No           -
d22   No           -
d8    No           -
d9    No           -
d10   No           -
d18   No           -
d19   No           -
d17   No           -
d5    No           -
d16   No           -
d4    No           -

pr  9 13:31:25 smfa01 scsi:    Sense Key: Aborted Command
Apr  9 13:31:25 smfa01 scsi:    ASC: 0x47 (information unit iucrc error detected), ASCQ: 0x3, FRU: 0x8
Apr  9 13:31:25 smfa01 md_stripe: WARNING: md: dg-psmf/d51: write error on /dev/did/dsk/d9s6
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1 (mpt1):
Apr  9 13:31:25 smfa01  Target 5 reverting to async. mode
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1/sd@5,0 (sd9):
Apr  9 13:31:25 smfa01  Error for Command: write(10)               Error Level: Retryable
Apr  9 13:31:25 smfa01 scsi:    Requested Block: 30930532                  Error Block: 30930532
Apr  9 13:31:25 smfa01 scsi:    Vendor: FUJITSU                            Serial Number: 0712D02MV3  
Apr  9 13:31:25 smfa01 scsi:    Sense Key: Aborted Command
Apr  9 13:31:25 smfa01 scsi:    ASC: 0x47 (information unit iucrc error detected), ASCQ: 0x3, FRU: 0x8
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1 (mpt1):
Apr  9 13:31:25 smfa01  Target 5 reverting to async. mode
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1/sd@5,0 (sd9):
Apr  9 13:31:25 smfa01  Error for Command: write(10)               Error Level: Retryable
Apr  9 13:31:25 smfa01 scsi:    Requested Block: 30930532                  Error Block: 30930532
Apr  9 13:31:25 smfa01 scsi:    Vendor: FUJITSU                            Serial Number: 0712D02MV3  
Apr  9 13:31:25 smfa01 scsi:    Sense Key: Aborted Command
Apr  9 13:31:25 smfa01 scsi:    ASC: 0x47 (information unit iucrc error detected), ASCQ: 0x3, FRU: 0x8
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1 (mpt1):
Apr  9 13:31:25 smfa01  Target 5 reverting to async. mode
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1/sd@5,0 (sd9):
Apr  9 13:31:25 smfa01  Error for Command: write(10)               Error Level: Retryable
Apr  9 13:31:25 smfa01 scsi:    Requested Block: 30930532                  Error Block: 30930532
Apr  9 13:31:25 smfa01 scsi:    Vendor: FUJITSU                            Serial Number: 0712D02MV3  
Apr  9 13:31:25 smfa01 scsi:    Sense Key: Aborted Command
Apr  9 13:31:25 smfa01 scsi:    ASC: 0x47 (information unit iucrc error detected), ASCQ: 0x3, FRU: 0x8
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1 (mpt1):
Apr  9 13:31:25 smfa01  Target 5 reverting to async. mode
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1/sd@5,0 (sd9):
Apr  9 13:31:25 smfa01  Error for Command: write(10)               Error Level: Retryable
Apr  9 13:31:25 smfa01 scsi:    Requested Block: 30930532                  Error Block: 30930532
Apr  9 13:31:25 smfa01 scsi:    Vendor: FUJITSU                            Serial Number: 0712D02MV3  
Apr  9 13:31:25 smfa01 scsi:    Sense Key: Aborted Command
Apr  9 13:31:25 smfa01 scsi:    ASC: 0x47 (information unit iucrc error detected), ASCQ: 0x3, FRU: 0x8
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1 (mpt1):
Apr  9 13:31:25 smfa01  Target 5 reverting to async. mode
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1/sd@5,0 (sd9):
Apr  9 13:31:25 smfa01  Error for Command: write(10)               Error Level: Retryable
Apr  9 13:31:25 smfa01 scsi:    Requested Block: 30930532                  Error Block: 30930532
Apr  9 13:31:25 smfa01 scsi:    Vendor: FUJITSU                            Serial Number: 0712D02MV3  
Apr  9 13:31:25 smfa01 scsi:    Sense Key: Aborted Command
Apr  9 13:31:25 smfa01 scsi:    ASC: 0x47 (information unit iucrc error detected), ASCQ: 0x3, FRU: 0x8
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1 (mpt1):
Apr  9 13:31:25 smfa01  Target 5 reverting to async. mode
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2/scsi@1/sd@5,0 (sd9):
Apr  9 13:31:25 smfa01  Error for Command: write(10)               Error Level: Fatal
Apr  9 13:31:25 smfa01 scsi:    Requested Block: 30930532                  Error Block: 30930532
Apr  9 13:31:25 smfa01 scsi:    Vendor: FUJITSU                            Serial Number: 0712D02MV3  
Apr  9 13:31:25 smfa01 scsi:    Sense Key: Aborted Command
Apr  9 13:31:25 smfa01 scsi:    ASC: 0x47 (information unit iucrc error detected), ASCQ: 0x3, FRU: 0x8
Apr  9 13:31:25 smfa01 md_stripe: WARNING: md: dg-psmf/d51: write error on /dev/did/dsk/d9s6
Apr  9 13:31:25 smfa01 scsi: WARNING: /pci@7c0/pci@0/pci@1/pci@0,2

doging

d8s6            0     No     Maintenance   No  
        d9s6            0     No     Maintenance   No  
        d10s6           0     No      Last Erred   No  


先备数据要紧

水木清华

是的，数据已经通过ufsdump 备份到其它硬盘中。

风之幻想

应该是硬盘坏了.sd9检查一下这个盘.

水木清华

我证实过，将所有的有报错的硬盘都换过，我连meta都重新做了， 只要写数据就报错，把这些硬盘换到其它SE3320中，就没有问题，可以正常读写的。
我用的是SGPCI1SCSILM320-Z      PCI Single Ultra320 SCSI HBA 每台主机二块， scsi 卡. 两台SE3320 24块硬盘，(JBOD）模式。
单总线连接方式与主机相连。

bencyber

硬盘的补丁是多少，升级一下硬盘的补丁看看，要不找SUN换

风之幻想

难道是这个SE3320有问题.补丁,其他的都正常的话.联系SUN更换吧.

doging

好像当出现多个  Maintenance时，卷会变为只读状态

水木清华

Vendor:   FUJITSU
Product:  MAW3300NCSUN300G
Revision: 1703

Vendor:   SEAGATE
Product:  ST330000LSUN300G
Revision: 045A