从nfs向本地拷贝大量小文件很慢, 应该怎样调优?

mainGalaxy

我的配置是这样的, CENTOS 5.3, mount了一个NFS的分区, 在使用过程中, 需要经常从NFS分区向本地copy 大量的小文件(大约10000个文件, 总大下1G左右,因为有特殊的需求, 无法先打包再copy), 发现这个copy的过程很慢, 这种情况下应该怎样调整参数以提高copy的速度呢?  

谢谢大家

wheel

在/etc/sysctl.conf里加上

net.ipv4.tcp_fin_timeout=9
net.ipv4.tcp_max_tw_buckets =300
net.ipv4.tcp_tw_recycle=1
net.core.rmem_default=262144
net.core.wmem_default=262144
net.core.rmem_max=262144
net.core.wmem_max=262144
net.ipv4.udp_mem = 8388608 12582912 16777216
net.ipv4.udp_rmem_min=65536
net.ipv4.udp_wmem_min=65536
net.ipv4.tcp_window_scaling=1
net.ipv4.ip_local_port_range=1024 65535

timdcn

这个和网络有关吧，千兆网络快些吧

www_xylove

加参数：
rsize=8096
wsize=8096

wheel

udp_mem　等主要是加大网卡性能，，楼主可是测下和本机不同挂点CP时慢多少，，如果慢的很多那就按我这改可明显提高。。

a.a

先看一下，网络是否稳定吧，问题不定在服务的配置上？可以找几个大文件，测试一下看看时间！

aleng

千兆也不快，20多M平均。极少数情况能到40M。甚至我觉得基本无法加速。
5.0以上有个cachefilesd包，可惜不知原理，也不会用。
3楼的应该不管用，4楼主要是加大了收发缓冲区，可以实验一下是否管用。

[ 本帖最后由 aleng 于 2009-6-9 18:18 编辑 ]

marsaber

小文件啊，难。

cuplinux

确实比较麻烦，我当时rsync，光列表就用了不少时间，因为每次要建立连接。

你可以考虑打包一部分，这样可能会好一些。