RAID 5阵列故障问题

shaken

EMC的CX4磁盘柜，15块600G光纤硬盘，Disk 0-4做一个Raid 5 ，Disk 5-13 做另外一个Raid 5,Disk 14 是Hot spare，首先发现Disk 8 故障，此时磁盘阵列正常运行，下订单采购硬盘，在新硬盘未到之前，Disk12也故障，此时阵列系统正常运行。手贱热插拨了一下Disk 8（确认接口和详细型号等，虽然在管理系统也可以查到）。阵列柜进行了同步，当时没在意，想想应该不会有什么问题。次日，操作系统提示无法读写该磁盘分区，重启服务器，提示发现新硬盘，需要初始化，所有数据消失。咨询磁盘阵列柜的售后工程师，让我用新的硬盘替换Disk 12,现在一直处于Equalizing状态，但是硬盘灯不闪烁。请问还有修复的可能性吗？主要数据量有点大。

shaken

另外,如果硬盘拿去做数据恢复的话,大概有多大的概率可以恢复成功

shaken

回复 7# ylky_2000
出现你说的，我一般是停业务，备份数据，然后直接热插拔更换故障盘。

shaken

回复 4# izee
按照这样说，首先要查一下日志，搞清楚disk14（热备盘） 当前的数据状态到底是同步了disk12 还是 disk8 ，对吧？
另外，热备盘的备份机制到底是怎么样的？查过日志：
1.在热插拔disk 8 前，热备盘是replace了disk 8,disk 8（故障1盘）
2.热插拨disk 8后，disk14 的状态是replacing disk 8 和disk 12
3.在上面两步骤之后，插入新硬盘到disk 12 的位置后，disk 14的状态是replace 了disk 12。
目前热备盘的数据状态到底是怎么样？是否把disk 8 插入一块新盘后就可以进行数据补偿了？

shaken

非官方提供的一个方法是将disk 8 （故障盘）冷却后重新插入使用，尝试重新数据补偿回复数据。

shaken

ylky_2000 发表于 2015-05-15 10:37
这个处理方法对吗？

1.raid 5没有热备盘的情况，目前都没有碰到
2.raid 5坏了一块盘之后，如果有热备，一般热备会直接replace了
3.常规阵列柜都支持热插拔吧
4.关机或者做其他任何的硬件操作之前，如果数据还可以读取，必须要先备份。
这次我raid 5故障的教训就是没有先做备份，主要是备份的量大，而业务又不能停，催着我赶紧修复硬件。这个是很明显的bug！

shaken

目前问题解决，解决方法就是关阵列柜，拔掉disk 8 ,隔一段时间后（中间试过几次，发现时间长短效果都一样，估计不是盘的问题导致）插入disk 8，开机，阵列自动进行rebulid，奇怪的是一开始重建的是hotspare disk 14,然后是新插入的disk 12进行数据补偿。除了故障当天之外的所有数据都备份出来了，在备份数据的时候，只要一读取故障当天的数据，阵列就报错，disk 8 亮红灯。一共花了6个小时备份数据,在备份数据的同时，查询raid的状态都正常的。目前插入disk 8 ,系统在做重建，不是数据补偿。
故障的问题还有疑问，怀疑可能不是盘坏导致的，是SP B有问题，接下来备份日志，继续查问题。

shaken

插入disk 8后，进行rebuild，读写所有数据都正常了。