一次机器的故障处理过程

yuxiao_zhao

昨天早上接到客户的报修电话 一台生产机（db2）出现问题 hacmp已经发生切换 客户那边的环境是aix 5.3 hacmp5.3 ha为双机互备模式 上午11点赶到现场后发现出问题的机器已经无法ping通 但是看前面板 绿灯常亮 一切正常 通过笔记本登录asmi后查看错误日志 发现前天晚上有三条内存方面的报错信息 查看location code是一样 拨打ibm800电话保修 下午2点ibm工程师到场 更换内存后机器恢复正常
  然后尝试启动hacmp 但是启动时报错 大致信息为在本机上的一个由ha管理的vg内找不到某个lv 马上询问客户是否手工在vg内增加过lv 果然客户由于数据存储空间不够 手工在另一台机器（db1）上对该vg增加了10于个裸设备 于是告诉客户需要停ha做同步
  等待客户的应用不太繁忙到时候（此时已经是晚上11点多了 中间就是在上网 傻等了7个多小时） 在db1上smitty clstop停ha 等所有应用都停止了 vg都释放 ip也变回后 同步ha 发现同步不成功 仍然抱类似错误 稍加考虑决定在db2上手工varyon该vg 然后lsvg -l查看发现那些在db1上新建的裸设备的type都为？？？ 于是ls -al /dev/vgname 记录下major number后 varyoffvg exportvg 再importvg  然后lsvg -l查看发现所有lv的状态都正常 再次 varyoffvg后在db1上同步ha 同步成功 smitty clstart 选择两个node同时启动ha ha启动成功 等待一会后检查应用 所有应用正常 回家～

yddll

为啥不尝试cspoc呢？

yuxiao_zhao

原帖由 yddll 于 2008-1-20 12:54 发表
为啥不尝试cspoc呢？

用户不了解ha 在建新的lv的时候没和任何人沟通 而且那时候他们的运维也不是我们做的 应该属于历史遗留问题了 每天零点的ha报错信息也没人关心 这次我是教他怎么在ha菜单里面建lv了 希望下次他们会注意……

yddll

原帖由 yuxiao_zhao 于 2008-1-20 12:58 发表

用户不了解ha 在建新的lv的时候没和任何人沟通 而且那时候他们的运维也不是我们做的 应该属于历史遗留问题了 每天零点的ha报错信息也没人关心 这次我是教他怎么在ha菜单里面建lv了 希望下次他们会注意……

事后也可以用cspoc的

备机的vg不是active的话，可以用cspoc来做export/import操作

yuxiao_zhao

备机的ha没有起来 主机的ha已经起来的情况也能这么做么？
昨天的情况是所有vg在db1上是active ha正常运行 备机ha起不来
这个还没研究过 明天去demo机看看……

yddll

原帖由 yuxiao_zhao 于 2008-1-20 13:04 发表
备机的ha没有起来 主机的ha已经起来的情况也能这么做么？
昨天的情况是所有vg在db1上是active ha正常运行 备机ha起不来
这个还没研究过 明天去demo机看看……

忘记你的前提了，你的机器当机了，sorry，要是有机器ha没起来的话，就不用试了

jimmytao

过年了,别出什么事情了

yuxiao_zhao

原帖由 yddll 于 2008-1-20 13:19 发表


忘记你的前提了，你的机器当机了，sorry，要是有机器ha没起来的话，就不用试了

你的意思就是说如果ha都起来的情况下可以弥补的是吧 改天我去试试 我还没试过呢 谢谢啊