双节点HA,对于quorum disk的迷惑

busyant

最近要做一个双节点的NFS集群,两个redhat AS 5.4 Server连接SAN做成HA模式,对于要不要quorum disk一直很迷糊,RH的官方文档和网上的示例都是基于3+个节点的,而且对quorum disk也语焉不详,而qdisk的man page却明确说明双节点时需要它来防止脑裂.
想请教有相关经验的大侠,到底要,还是不要?如果不要,原理或相关文档何在?
先谢过!

busyant

还是没有弄明白“双节点为什么不需要qdisk”。
创建了一个启用quorum disk的配置文件，跑起来的时候没什么问题，没过几天就发现，系统不定期的报last quorate然后node1被fence掉，再过一段时间后是node2被fence掉，反正就是两个机器在相互重启。
看日志也半懂不懂，因为项目时间关系没再详细研究，重建了一个没有qdisk的配置，现在跑起来没问题了。
为了防止两台机器网络断掉造成裂脑，把两个node的双网卡bonding了一下，分别接在不同的交换机上，交换机再配一下聚合，这样将风险降到比较低了。

不过还是期待jerrywjl大侠能讲讲“双节点为什么不需要qdisk”！

blazewater

设想一下，如果机器的tcp协议栈崩溃，那不就心跳全没了？
这是一个单点故障，我曾经遇到过的。
所以IBM的HACMP和HP的MC/ServiceGuard都支持用串口做心跳，但是貌似还是要用到quorumdevice。

blazewater

双节点如果不用quorum的话，在两个节点互相不能通信的时候会出问题。
不过就目前的情形来看，这种情况一般很少出现了。
所以veritas cluster貌似不配置quorum也可以。
sun cluster好像就不行。

blazewater

就是仲裁设备，sun cluster里面叫：quorum device，和rac的voting disk是一个概念
关键用于用于双机状态同步的心跳连接（有的也可以用公网连接做心跳）全部断掉，两个节点互相感知不到对方的时候，哪个节点接管应用的仲裁作用。
一共3票（必须是奇数），两个cluster节点各算一票，quorum device算一票，无法感知到对方的时候，谁拥有2票谁就拥有应用的所有权。

asmboy001

quorum disk我感觉和rac中的voting disk功能应该是差不多的吧。rac双节点都需要voting disk的啊


jerrywjl 讲讲双节点集群为什么要他没用

jerrywjl

截至目前理解得都没错。不过不够完全。

busyant

我对qdisk的简单理解，不知道是否正确：
1、qdisk根据定义的heuristic，来确认自己是否还“活着”，比如ping一个gateway。然后
2、往quorum disk写入自己的存活信息。
3、再检查其他node的存活状态

过程中还要引入 interval、TKO的概念。引入这些概念后就容易混淆了。

busyant

谢谢两位的回复，如果两位能指点一个比较detail的文档就好了。
凡事得求甚解啊！

nagaregawa

双节点不需要qdisk，三个节点以上的话如果你对qdisk的那几个参数不明白的话，最好也不要使用，很容易出问题的