论坛徽章:: 0

电梯直达

1楼 [收藏(0)] [报告]

发表于 2006-01-23 17:26 |只看该作者 |倒序浏览

环境描述:
创建4个线程分别读写网卡,4个循环几乎是一样的,使用select函数发送或者接收数据.
每次循环使用sched_yield释放CPU资源.
使用top查看,整个进程占用CPU资源1-2%

问题描述:

send函数发送正常,但是使用netstat查看,发现数据阻塞在Send-Q里,如下:
Proto Recv-Q Send-Q Local Address Foreign Address State
tcp 0 264 192.168.250.1:9200 192.168.250.2:2734 ESTABLISHED

需要经过随机的时间,大约5-50秒不等,才发送出去.

问题总结:
send函数立刻成功,但是为什么网卡需要花费太多的时间发送缓存中的数据?

是不是内核调度网卡不及时?

当时其他的网络是正常的.使用ssh登陆,smb等都没有任何停顿.

文库|博客

JohnBull

版主

论坛徽章:: 0

2楼 [报告]

发表于 2006-01-24 00:22 |只看该作者

It was caused by Nagle algorithm.
man 7 tcp
see TCP_NODELAY

   TCP_NODELAY
            If  set,  disable  the Nagle algorithm.  This means
            that segments are always sent as soon as  possible,
            even if there is only a small amount of data.  When
            not set, data is buffered until there is  a  suffi-
            cient amount to send out, thereby avoiding the fre-
            quent sending of small packets,  which  results  in
            poor  utilization of the network.  This option can-
            not  be  used  at  the  same  time  as  the  option
            TCP_CORK.

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

柳五随风

丰衣足食

论坛徽章:: 0

3楼 [报告]

发表于 2006-01-24 03:50 |只看该作者

1.send只是表示写入send buffer成功(default方式),印象中可以通过修改setsockopt改变成真正发送出去send才返回.
2.nagle算法最大是2S延迟.

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

JohnBull

版主

论坛徽章:: 0

4楼 [报告]

发表于 2006-01-24 11:51 |只看该作者

原帖由 柳五随风 于 2006-1-24 03:50 发表
2.nagle算法最大是2S延迟.

Really?? Where did you get this constant?

I didn't find any timeout hard limitations on nagle algorithm in linux-2.6.15 kernel source tree, and RFCs either.

Tell me the truth, so I can submit a kernel patch for linux.

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

xujg

丰衣足食

论坛徽章:: 0

5楼 [报告]

发表于 2006-01-24 14:23 |只看该作者

建议楼上能打中文的时候还是打中文
我想不到有什么理由你非要用英文。
毕竟不是所有人英文都像你这么。。。厉害。。。
作为版主，还是让更多人能看懂你的贴好。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

柳五随风

丰衣足食

论坛徽章:: 0

6楼 [报告]

发表于 2006-01-24 14:44 |只看该作者

to JohnBull;
talk to this guy:cec@gryphon.gsfc.nasa.gov

he knows exactly what the 2 seconds delay means.

I think the Nagle algorithm affects only the data in the TCP sliding woindow between time of last two ack's, that is definitely defined in any *nix kernel.