大量文件远程scp的问题

misslushui

是这样的目录/home/test/下面有很多文件

例如：

a.gz
b.gz
c.gz
.......
.......
........



要求每次copy一百个到不同的远程机器上，也就是前边一百个copy到一个远程机器，接着的一百个copy到另一个机器，依次类推，如何实现呢？

谢谢！

moartel

这个没啥技巧吧.

[ 本帖最后由 moartel 于 2009-6-29 21:13 编辑 ]

springwind426

1. 
   
2. #!/bin/bash
   
3. host=(host1 host2 host3)
   
4. i=0
   
5. for file in /home/test/*
   
6. do
   
7.    scp "$file" ${host[$((i/100))]}:/target
   
8.    ((i++))
   
9. done
   

复制代码

misslushui

原帖由 springwind426 于 2009-6-29 21:37 发表

#!/bin/bash
host=(host1 host2 host3)
i=0
for file in /home/test/*
do
   scp "$file" ${host[$((i/100))]}:/target
   ((i++))
done

谢谢！不过有个小问题，就是每copy一个文件都要输一次密码？  

另一个就是把/target 写成/opt/   最后为报这个错  cp: cannot create regular file `:/opt/': No such file or directory

springwind426

scp 的前提是目标目录必须存在

第二，每次要求输入密码，你可以尝试使用密钥登录

kala_fly

原帖由 misslushui 于 2009-6-30 09:12 发表



谢谢！不过有个小问题，就是每copy一个文件都要输一次密码？  

另一个就是把/target 写成/opt/   最后为报这个错  cp: cannot create regular file `:/opt/': No such file or directory

scp /etc/test/* $host:/destinationDIR/
就可以了

不输入密码的话，用密钥认证。如下

cd ~/.ssh || mkdir ~/.ssh && cd ~/.ssh ssh-keygen -t rsa -b 1024 一直回车 scp id_rsa.pub $yourhost:~/.ssh ssh username@$yourhost cat ~/.ssh/id_rsa.pub >>~/.ssh/authorized.keys scp /etc/test/* $yourhost:/destinationDIR/

misslushui

原帖由 springwind426 于 2009-6-30 09:28 发表
scp 的前提是目标目录必须存在

第二，每次要求输入密码，你可以尝试使用密钥登录

目标目录是存在的，而且文件也copy进去了，但最后的时候报那个错误

springwind426

最后报错，是因为你的文件可能超过了你指定的主机数

因为我的例子里是3个主机，如果你的文件数超过300了，就会出错的

misslushui

谢谢！给解释一下这句话吗？

${host[$((i/100))]}

springwind426

$host 是一个数组

${host[$i]} 是取数组的第i个元素的值

$((i/100)) 是取i整除100后的值，bash中只可以做整数运算

直观表现就是每100个文件，更换一个 $host 存放的元素