免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 1761 | 回复: 3
打印 上一主题 下一主题

[FastDFS] [SOLVED] Group的数据出现严重不平衡的问题 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2012-02-01 17:45 |只看该作者 |倒序浏览
本帖最后由 amusemelu 于 2012-02-02 09:18 编辑

我现在集群有四个Group,每个Group有两个Storage Server
配置是默认配置, FastDFS版本是v3.06

Group的部分信息如下:
====================
Group1
--------
         total_upload_count = 0
         success_upload_count = 0
         total_file_open_count = 0
         success_file_open_count = 0
         total_file_write_count = 0
         success_file_write_count = 0

Group2
--------
         total_upload_count = 0
         success_upload_count = 0
         total_file_open_count = 0
         success_file_open_count = 0
         total_file_write_count = 0
         success_file_write_count = 0
Group3
-------
         total_upload_count = 418551
         success_upload_count = 418551
         total_file_open_count = 844753
         success_file_open_count = 844753
         total_file_write_count = 846089
         success_file_write_count = 846089

Group4
-------
            total_upload_count = 360240
        success_upload_count = 360240
          total_file_open_count = 726511
        success_file_open_count = 726511
        total_file_write_count = 728842
        success_file_write_count = 728842


问题:
1. 为什么Group之间会出现不平衡的问题?

2. 整个集群的文件数是多少?是success_upload_count的总和还是total_file_write_count的总和。为什么他们之间会相差一倍的?


论坛徽章:
4
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:11IT运维版块每日发帖之星
日期:2016-08-11 06:20:00IT运维版块每日发帖之星
日期:2016-08-15 06:20:00
2 [报告]
发表于 2012-02-01 21:22 |只看该作者
回复 1# amusemelu

2. 整个集群的文件数是多少?是success_upload_count的总和还是total_file_write_count的总和。为什么他们之间会相差一倍的?

如果没有删除过文件,为success_upload_count的总和。
total_file_write_count表示调用系统调用write的次数。

论坛徽章:
0
3 [报告]
发表于 2012-02-02 09:07 |只看该作者
嗯,多谢老大。:wink:

数据的不平衡可能和这个参数有关。

# the method of selecting group to upload files
# 0: round robin
# 1: specify group
# 2: load balance, select the max free space group to upload file
store_lookup=2

因为Group3与Group4的空间比其它两个组大。

论坛徽章:
4
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:11IT运维版块每日发帖之星
日期:2016-08-11 06:20:00IT运维版块每日发帖之星
日期:2016-08-15 06:20:00
4 [报告]
发表于 2012-02-02 10:33 |只看该作者
回复 3# amusemelu

你自己找到原因就好,so good!
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP