sendfile的效率还不如read write？

newbieforever

    最近写了个测试程序，通过网络发送4G的文件到目标，分别用两种方式sandfile 和read 到本地BUFFER write到socket， 两种方式每次都是发送64K

测试环境：KVM虚拟出来的两台开发机，A和B，都是万兆网卡，2.6.32的内核，centos

结果发现通过TCP，A发送到B时sendfile的时间基本是read write的两倍，readwrite比较稳定基本在5秒左右，sandfile不太稳定 但基本在10多秒

但通过lo口发送给本地进程    sandfile明显比readwrite快很多 基本是2秒不到的时间

按理说sandfile相比较readwrite省去了几个数据拷贝的步骤，效率应该更高，但通过网络发送给远端的时候效率怎么会比readwrite差这么多，有人研究过吗？或是使用过sendfile的，有出现这样的情况吗？

humjb_1983

newbieforever 发表于 2013-12-14 11:37
最近写了个测试程序，通过网络发送4G的文件到目标，分别用两种方式sandfile 和read 到本地BUFFER write ...

个人觉得，lo接口测试结果应该能说明问题，实际网口的性能差距可能不在sendfile上，可以检查下网络配置是否相同、oprofile采样看下热点、或者在相关流程中打点统计下时间消耗点。

crspo

用netperf在40gb上跑了一下，write()的性能是7G，而sendfile可以到大24G。看起来有bug

瀚海书香

回复 1# newbieforever
建议在物理机上测试，排除KVM的影响。