gfs2文件系统挂起的问题

ygl23

在三台dell m610上安装系统centos6.3,挂载后端的dell eqlogic ps6100存储。
安装配置了rhcs环境，同时通过iscsi加载eq存储区域，创建gfs2文件系统。
mkfs.gfs2 -p lock_dlm -t cluster1:gfs2 -j 3 /dev/mapper/eql-vol01p2

添加，配置了qdisk表决磁盘：

mkqdisk -c /dev/mapper/eql-vol01p1 -l myqdisk

cluster.xml配置内容如下：

1. <?xml version="1.0"?>
   
2. 
   
3. <cluster config_version="43" name="cluster1">
   
4.         <clusternodes>
   
5.                 <clusternode name="node1" nodeid="1"/>
   
6.                 <clusternode name="node2" nodeid="2"/>
   
7.                 <clusternode name="node3" nodeid="3"/>
   
8.         </clusternodes>
   
9.         <fencedevices>
   
10.                 <fencedevice agent="fence_ipmilan" auth="md5" ipaddr="192.168.91.126" login="root" name="node1" passwd="calvin" timeout="30"/>
    
11.                 <fencedevice agent="fence_ipmilan" auth="md5" ipaddr="192.168.91.8" login="root" name="node2" passwd="calvin" timeout="30"/>
    
12.                 <fencedevice agent="fence_ipmilan" auth="md5" ipaddr="192.168.91.23" login="root" name="node3" passwd="calvin" timeout="30"/>
    
13.         </fencedevices>
    
14.         <cman expected_votes="5"/>
    
15.         <quorumd interval="1" label="myqdisk" min_score="2" tko="10" votes="2">
    
16.                 <heuristic interval="3" program="ping -c 3 -w 3 192.168.91.120" score="2" tko="23"/>
    
17.         </quorumd>
    
18.         <totem token="43200000"/>
    
19. </cluster>

复制代码

三台机器挂载共享存储区域 mount -t gfs2 /dev/mapper/eql-vol01p2 /mnt/

现在的问题是当其中一台机器宕机后，别外两机器上挂载的gfs2文件系统目录/mnt是可以正常读取，但是无法写入，一旦产生写入操作，gfs2文件系统就会挂起，停止响应。
需要等到宕机的机器系统恢复，cman服务正常启动后，gfs2文件系统才会恢复可以写入。

我想咨询各位，是否有参数可以配置，可以避免出现这种现象？

临风听雪

貌似我遇到的是在fence时候根本都无法读取，等fence结束时候才可以读文件

2.9. GFS2 节点锁定
要获得最佳 GFS2 文件系统性能，则需要理解其操作的基本原理。单节点文件系统与缓存一同使用，其目的是在频繁使用请求的数据时可消除磁盘访问延迟。Linux 页面缓存（以及缓冲缓存）提供这个缓存功能。
使用 GFS2，每个节点都可有其自身的页面缓存，该缓存中包含 on-disk 数据的一部分。GFS2 使用 glocks（发音为 gee-locks）锁定机制维护节点间缓存的完整性。glock 子系统提供缓存管理功能，该功能使用分布式锁管理器（DLM）部署作为基础沟通层。
glocks 在每个内节点中为缓存提供保护，因此在每个内节点中都有一个锁定用来控制缓冲层。如果为那个 glock 赋予共享模式（DLM 锁定模式：PR），那么那个 glock 保护下的数据可同时被一个或者多个节点缓存，这样多有节点就都有到该数据的本地访问。
如果为 glock 赋予专用模式（DLM 锁定模式：EX），那么只有一个节点可缓存那个 glock 保护的数据。所有修改数据的操作（例如 write 系统调用）都使用这个模式。
如果另一个节点请求 glock，但无法立刻获得，那么 DLM 会向该节点发送一条信息，或者向目前使用 glock 并妨碍新的请求的节点发送信息，要求它们释放其锁定。释放 glock（大多数文件系统操作标准）需要很长时间。释放共享 glock 只需要使该缓存无效，相对缓冲的数据来说速度较快。
释放专用 glock 需要 log flush，并向磁盘写回所有更改的数据，之后要使每个共享的 glock 失效。

上面这个是红帽gfs2官网上的说明，我现在也遇到文件挂起问题，可以加我QQ450701410聊下吧，

冷风

看看具体的messages里面在出现一个宕机被fence之后有什么提示信息