做HA，故障机未能varyoff掉，怎么解决。

cao0397

个人感觉问题处理思路如下:
如果是现网设备,A机死机又不释放资源的话,最重要的是先恢复业务，具体实施步骤如下
1、应该先拔掉A机网线（主备网卡上的网线都拔掉）,然后在B机上系统上查看是否得到资源，如果资源没有释放，手工varyonvg，如果还不能varyonvg，就对B机重启
（注意不要对A机进行重启或者停机，后面我们需要对A机做DUMP，分析宕机原因）
2、重启以后现在系统就相当于单机呢，就可以开始恢复业务，
步骤如下：
a、手工激活VG：
#varyonvg XXvg
#lsvg -o
b、手工mount所有的LV：
#lsvg -l XXvg
#mount
#mount /dev/xxx：应该是mount文件系统 mount fsname
#df -k
c、手工将浮动IP绑定到网卡上：
#netstat -ni
#ifconfig en1 xx.xx.xx.xx netmask xx.xx.xx.xx alias up
d、手工拉起业务
业务恢复以后，现在我们可以来分析发生故障的原因呢，有两个方面需要我们关注：
1、A机发生宕机的原因，2、B机为什么无法对VG进行VARYON操作
针对1：对A机做DUMP，通过DUMP分析来找到宕机原因；
针对2：对B机进行日志分析：一般来说对HA日志分析主要是两个日志文件：
/usr/es/adm/cluster.log
记录了集群的脚本和后台进程运行情况
/tmp/hacmp.out
记录了当天HACMP 事件(event)脚本和实用程序的运行情况
找到问题原因以后，可以在夜里进行双机恢复操作！

justsowhat

有可能是vg锁的关系，可以试一下解锁vg

chvg -u vgname

baochengchen

11楼写得好啊。。。

yanbing

11楼确实有一定功力，希望有空能多来CU帮帮大家， ：）

netyu

估计是没有完全down下来的原因造成的。
遇到很多这样的问题。不过我遇到的一般是软件方面 的原因造成的down不完全。所以需要进ha管理里recovery下，一般就可以完全的down下来了。
建议楼主可以先查看下日志看看是什么原因引起的，找到原因后即可方便的解决故障。

吴博

原帖由 yanbing 于 2008-5-7 01:31 发表
没有人想到去看hacmp.out对应时间点的vg操作记录么？

PD不是靠猜。PD水平不是看谁猜谜猜得准，是比谁更能注重细节和尊重数据！

建议同行们没事看看CSI，能学到不少东西！

请问 CSI 是 什么 东东啊？见笑了! 呵呵！

yanbing

CSI是电视连续剧，中文翻译是“犯罪现场”。

注意细节，尊重数据，这是片中所推崇的处事原则，用在PD上亦非常合适。。

我去年曾经就preson break做个一个ppt，专门讲的就是preson break和维护工程师之间的关系，还在公司内部办过2次讨论会呢。

思路要开阔，原则要遵循，事情做起来会舒服很多。

lovefeng54

yanbing版主牛啊，触类旁通，对于非技术类活也是很有帮助的。

skyzqq

1、A机直接断电
2、varyonvg有个参数可以同时varyon的 ，man一下看看，好像是－y还是 －s什么的，记不清了

luanmingujn

楼上的  有时候hacmp。out这个东西不一定在/tmp目录下
我曾经遇到过这种情况，结果后来找了半天在/var下找到了
这个HA不是我实施的，具体我也不知道怎么个情况