如何高效地将大量小文件平均分到各个文件夹中？

Herowinter

回复 9# blackold

黑哥的算法学得真好,分治法分分钟搞定,不得不服.
   

reyleon

来个伪多进程并发 mv

iocg

回复 9# blackold


    能不能给个代码参考下呢？

yestreenstars

回复 13# iocg

大概是这样：

1. ls | split -l 200000
   
2. mkdir {0..4}
   
3. awk '{cmd="mv "$0" "int(NR/200000);system(cmd);close(cmd)}' x*

复制代码

blackold

回复 13# iocg

1. mkdir {1..5}
   
2. 
   
3. prefix=prefix$$
   
4. 
   
5. find -maxdepth 1 -type f -name '*.txt' | split -l 200000 -d -a1 - $prefix
   
6. 
   
7. for i in {1..5};do xargs -a $prefix$i -d '\n' mv -i -t $i;done
   
8. 
   
9. rm $prefix[0-9]

复制代码

原来不是我的错， 是论坛的错。

@Shell_HAT

bulletmarquis

回复 15# blackold


    黑哥这句 prefix=prefix$ 是啥意思啊？

blackold

回复 16# bulletmarquis


    漏了，是$$

Shell_HAT

回复 17# blackold

1. #1个$的实际效果：
   
2. $
   
3. #2个$的实际效果：
   
4. $
   
5. #3个$的实际效果：
   
6. $$
   
7. #4个$的实际效果：
   
8. $$

复制代码

blackold

回复 18# Shell_HAT


    Shell_HAT 什么意思？ 看不懂。

Shell_HAT

回复 19# blackold


    Discuz论坛的两个JS脚本有bug，两个$符号放在code标签里面会丢掉一个。