免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 6436 | 回复: 7
打印 上一主题 下一主题

[FastDFS] happy_fish100版主请进 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2009-08-17 15:34 |只看该作者 |倒序浏览
你好,正在试用FastDFS,做测试的时候遇到一个问题,100个并发下载文件时,出现了大量如下错误:
[2009-08-13 15:51:45] ERROR - file: storage_service.c, line: 2059, client ip: 192.168.158.44, send file fail, errno: 104, error info: Connection reset by peer
[2009-08-13 15:51:45] WARNING - file: storage_service.c, line: 3114, client ip: 192.168.158.44, recv data fail, errno: 107, error info: Transport endpoint is not connected
[2009-08-13 15:51:45] ERROR - file: storage_service.c, line: 2059, client ip: 192.168.158.44, send file fail, errno: 32, error info: Broken pipe
[2009-08-13 15:51:45] ERROR - file: storage_service.c, line: 2059, client ip: 192.168.158.44, send file fail, errno: 32, error info: Broken pipe
[2009-08-13 15:51:45] ERROR - file: storage_service.c, line: 2059, client ip: 192.168.158.44, send file fail, errno: 32, error info: Broken pipe
[2009-08-13 20:10:55] WARNING - file: storage_service.c, line: 3114, client ip: 192.168.158.44, recv data fail, errno: 107, error info: Transport endpoint is not connected
[2009-08-13 20:10:55] WARNING - file: storage_service.c, line: 3114, client ip: 192.168.158.44, recv data fail, errno: 107, error info: Transport endpoint is not connected
[2009-08-13 20:10:55] ERROR - file: storage_service.c, line: 2059, client ip: 192.168.158.44, send file fail, errno: 32, error info: Broken pipe
[2009-08-13 20:10:55] WARNING - file: storage_service.c, line: 3114, client ip: 192.168.158.44, recv data fail, errno: 107, error info: Transport endpoint is not connected
[2009-08-13 20:10:55] ERROR - file: storage_service.c, line: 2059, client ip: 192.168.158.44, send file fail, errno: 32, error info: Broken pipe
[2009-08-13 20:10:55] ERROR - file: storage_service.c, line: 2059, client ip: 192.168.158.44, send file fail, errno: 32, error info: Broken pipe
[2009-08-13 20:38:37] ERROR - file: storage_service.c, line: 3114, client ip: 192.168.158.44, recv data fail, errno: 104, error info: Connection reset by peer
[2009-08-13 20:38:37] ERROR - file: storage_service.c, line: 3114, client ip: 192.168.158.44, recv data fail, errno: 104, error info: Connection reset by peer
[2009-08-13 20:38:37] ERROR - file: storage_service.c, line: 3114, client ip: 192.168.158.44, recv data fail, errno: 104, error info: Connection reset by peer
[2009-08-13 20:38:37] WARNING - file: storage_service.c, line: 3114, client ip: 192.168.158.44, recv data fail, errno: 107, error info: Transport endpoint is not connected
[2009-08-13 20:38:37] ERROR - file: storage_service.c, line: 2059, client ip: 192.168.158.44, send file fail, errno: 32, error info: Broken pipe
[2009-08-13 20:38:37] WARNING - file: storage_service.c, line: 3114, client ip: 192.168.158.44, recv data fail, errno: 107, error info: Transport endpoint is not connected
[2009-08-13 20:38:37] ERROR - file: storage_service.c, line: 2059, client ip: 192.168.158.44, send file fail, errno: 32, error info: Broken pipe
[2009-08-13 20:38:37] ERROR - file: storage_service.c, line: 2059, client ip: 192.168.158.44, send file fail, errno: 32, error info: Broken pipe
这个问题是否是storage的配置造成的?

storage的配置如下:
disabled=false
group_name=group1
bind_addr=
port=23000
network_timeout=60
heart_beat_interval=30
stat_report_interval=60
base_path=/data/fastdfs
sync_wait_msec=200
max_connections=2048
tracker_server=******:22122
keep_alive=0

[ 本帖最后由 dengxuster 于 2009-8-17 17:39 编辑 ]

论坛徽章:
4
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:11IT运维版块每日发帖之星
日期:2016-08-11 06:20:00IT运维版块每日发帖之星
日期:2016-08-15 06:20:00
2 [报告]
发表于 2009-08-17 16:53 |只看该作者

回复 #1 dengxuster 的帖子

客户端起了100个进程?
貌似问题出在客户端,客户端CPU负载太高导致的?
压力测试情况下,你查一下客户端的CPU负载情况

论坛徽章:
0
3 [报告]
发表于 2009-08-17 17:03 |只看该作者
原帖由 happy_fish100 于 2009-8-17 16:53 发表
客户端起了100个进程?
貌似问题出在客户端,客户端CPU负载太高导致的?
压力测试情况下,你查一下客户端的CPU负载情况

对,就是在客户端起了100个进程。
不过客户端服务器是正常的,就是storage服务器负载有点高

论坛徽章:
4
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:11IT运维版块每日发帖之星
日期:2016-08-11 06:20:00IT运维版块每日发帖之星
日期:2016-08-15 06:20:00
4 [报告]
发表于 2009-08-17 17:18 |只看该作者

回复 #3 dengxuster 的帖子

storage server硬件配置是怎样的呢?如内存、硬盘、CPU等。

论坛徽章:
0
5 [报告]
发表于 2009-08-17 17:36 |只看该作者
原帖由 happy_fish100 于 2009-8-17 17:18 发表
storage server硬件配置是怎样的呢?如内存、硬盘、CPU等。


测试环境的带宽为1G,服务器直接接到千兆交换机上,storage分为1个group,2台服务器。

2台storage server:2CPU (Intel E5310 1.6GHz), 4GB RAM, 73GB×2

[ 本帖最后由 dengxuster 于 2009-8-17 17:38 编辑 ]

论坛徽章:
4
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:11IT运维版块每日发帖之星
日期:2016-08-11 06:20:00IT运维版块每日发帖之星
日期:2016-08-15 06:20:00
6 [报告]
发表于 2009-08-17 18:27 |只看该作者

回复 #5 dengxuster 的帖子

storage server硬件配置还可以的。

max_connections=2048
最大连接数配置得太大,你分别修改为256和1024再试试?

[ 本帖最后由 happy_fish100 于 2009-8-17 18:29 编辑 ]

论坛徽章:
0
7 [报告]
发表于 2009-08-17 20:46 |只看该作者
原帖由 happy_fish100 于 2009-8-17 18:27 发表
storage server硬件配置还可以的。

max_connections=2048
最大连接数配置得太大,你分别修改为256和1024再试试?


好的,我先去试试。

论坛徽章:
0
8 [报告]
发表于 2009-08-18 17:21 |只看该作者
多谢fish兄,将max_connection改为512以后就没有上述错误了。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP