免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 4423 | 回复: 7

http 下载大文件出错,求帮忙?? [复制链接]

论坛徽章:
0
发表于 2015-10-16 18:33 |显示全部楼层
Web Server是Nginx,客户端集成的libcurl,客户端通过http下载文件,大小接近400MB,100MB网络环境下同时连接上多台(其实也只有6台)客户端(测试2个客户端的话没有问题),在多次的测试中发现,有时下载会不成功,报错也有好几种:
1、Connection reset by peer,服务器断开连接
2、sent partial file,文件传输不完整

请问下,该怎样排查出问题出个哪??请多提提建议,没这方面经验。

论坛徽章:
1
综合交流区版块每日发帖之星
日期:2015-09-23 06:20:00
发表于 2015-10-18 21:18 |显示全部楼层
中毒了么?先用瑞星等工具查查先。

论坛徽章:
5
IT运维版块每日发帖之星
日期:2015-08-06 06:20:00IT运维版块每日发帖之星
日期:2015-08-10 06:20:00IT运维版块每日发帖之星
日期:2015-08-23 06:20:00IT运维版块每日发帖之星
日期:2015-08-24 06:20:00IT运维版块每日发帖之星
日期:2015-11-12 06:20:00
发表于 2015-10-19 08:40 |显示全部楼层
看看服务器接口流量跑满了吗?

论坛徽章:
0
发表于 2015-10-19 11:39 |显示全部楼层
Server端是Ubuntu 14.04,对应的nginx版本是1.4.6,没有开防火墙

http response请看附件图片

再从/var/log/nginx/access.log中看到,服务器端发送的文件大小跟实际文件大小不符,服务器端用idstat查看,只有网卡数据几乎是满的,CPU还很闲置
curl18.png

论坛徽章:
0
发表于 2015-10-20 14:09 |显示全部楼层
下载了最新的nginx源码,从头开始编译,再次运行,在log里看到
  1. 2015/10/19 18:16:55 [info] 9799#0: *81 client timed out (110: Connection timed out) while sending response to client, client: 192.168.1.212, server: localhost, request: "GET /path/to/download/file HTTP/1.1", host: "192.168.1.250"
复制代码
再次google,看到nginx论坛的相关帖子,增加了proxy_read_timeout,多次测试后发现还是出现上面的这次报错信息。

论坛徽章:
12
数据库技术版块每日发帖之星
日期:2015-07-08 22:20:00IT运维版块每日发帖之星
日期:2016-05-01 06:20:00IT运维版块每周发帖之星
日期:2016-03-07 16:27:44IT运维版块每月发帖之星
日期:2016-03-07 16:25:25IT运维版块每日发帖之星
日期:2016-02-21 06:20:00IT运维版块每日发帖之星
日期:2016-02-20 06:20:00数据库技术版块每日发帖之星
日期:2016-02-06 06:20:00IT运维版块每日发帖之星
日期:2016-01-30 06:20:00IT运维版块每日发帖之星
日期:2016-01-03 06:20:00IT运维版块每日发帖之星
日期:2015-11-29 06:20:00IT运维版块每日发帖之星
日期:2015-08-10 06:20:00数据库技术版块每日发帖之星
日期:2016-06-16 06:20:00
发表于 2015-10-20 16:44 |显示全部楼层
先看看是不是专用的服务器吧 台机的螃蟹卡在大数据下会有问题 最好是换intel或博通的服务器专用网卡 最好能升级固件和驱动到最新 还得确认网线 交换机都没问题!

论坛徽章:
0
发表于 2015-10-21 10:47 |显示全部楼层
回复 6# rtm009

首先谢谢。

是中间设备引起的。


   

论坛徽章:
5
IT运维版块每日发帖之星
日期:2015-08-06 06:20:00IT运维版块每日发帖之星
日期:2015-08-10 06:20:00IT运维版块每日发帖之星
日期:2015-08-23 06:20:00IT运维版块每日发帖之星
日期:2015-08-24 06:20:00IT运维版块每日发帖之星
日期:2015-11-12 06:20:00
发表于 2015-10-21 13:31 |显示全部楼层
中间设备?
不是服务器上发出来的文件大小就不对吗?
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP