快速连接服务器但是 部分连接会失败

benjiamsh

快速连接 服务器，一共发送了6万多个情况。 服务器为自己编写的代码，通常6万个会有几十个到几百个连接是失败的。
如果服务器负载比较轻，基本可以保证6万多个请求一次完全连上，在总连接数在30-50万以后，就很难保证了。

accept的线程是单线程的，我猜不会因为accept不够快而造成失败，这是我能想到最快的办法了。

如果认为是机器性能不够作为理由， 但是用go 语言编写的服务程序，同一个器 就没有这个问题， 和它的连接总是能保证6万多个 一个不少。

linux 内核参数经过修改

c++ 和 go 是同一套配置， fd 不够这种问题也不存在。

从系统看 c++ 服务器的负载比go 写的 在同样压力下 cpu更低。但是accept 就是不行，请问这里有什么技巧吗？

李营长

accept的参数里设的排除连接数是多少？

benjiamsh

你说的是listen的参数吧？ 6000 已经配合内核参数修改。

李营长

那连接失败的errno是什么呢

yulihua49

benjiamsh 发表于 2014-09-21 12:31
你说的是listen的参数吧？ 6000 已经配合内核参数修改。

改60000。。。。。。。。

linux_c_py_php

优化过内核参数？关注我的历史发帖。

benjiamsh

我会仔细看看，猜测是因为我提供秒级定时器，在瞬间发包导致整个千兆网卡，满，而导致部分syn被丢弃。猜想而已，go版本的数据流量明显更稳定

benjiamsh

但网卡应该是双工的，收发并不影响。所以猜测未必对

benjiamsh

查了下客户端的情况 是有很多SYN_SEND 的状态， 而服务器端 没有SYN_RECV 状态。 这些连接没有建立起来。


查看了下客户端，没有出现错误。 这个是个问题， 客户端的写法 是 socket, 然后 connect （非阻塞模式） 加入epoll.
但是到最后也没出现任何事件。...  正常情况下，我会加一个定时器在这个socket 上，如果 一定时间没有出现事件，我会先主动关闭掉这个连接。但是现在 我想知道最后
出现什么情况，可惜 到了最后 epoll 也没有出现事件，还不知道 怎么改这个问题


服务器这段， 如果accept 线程 做点别的事情，那么基本上会有大量socket无法连接。所以 一切照旧。

还没解决

benjiamsh

我会仔细看看，猜测是因为我提供秒级定时器，在瞬间发包导致整个千兆网卡，满，而导致部分syn被丢弃。猜想而已，go版本的数据流量明显更稳定


问题可能出现在这里， 我将定时器设定为毫米级别。c++ 果然不再有syn lose. 当然还有一个改变是专门拿一个cpu core 处理accept. 目前100w连接不在有syn 丢失。

现在c++ 版本反而比go 更好一些。