如何高效地将大量小文件平均分到各个文件夹中？

iocg

现某文件夹A下有100w个小文件（.txt），大小10K左右。

假设文件数量的阈值设为20W。
将在A文件夹自动生成5个文件夹（命名：1~5），将100W个文件每20W个移动至5个文件夹中（不用按顺序）。

如何实现，怎样才能保证高效？

blackold

回复 20# Shell_HAT


    是这样啊，以前真没注意。

Shell_HAT

回复 19# blackold


    Discuz论坛的两个JS脚本有bug，两个$符号放在code标签里面会丢掉一个。

blackold

回复 18# Shell_HAT


    Shell_HAT 什么意思？ 看不懂。

Shell_HAT

回复 17# blackold

1. #1个$的实际效果：
   
2. $
   
3. #2个$的实际效果：
   
4. $
   
5. #3个$的实际效果：
   
6. $$
   
7. #4个$的实际效果：
   
8. $$

复制代码

blackold

回复 16# bulletmarquis


    漏了，是$$

bulletmarquis

回复 15# blackold


    黑哥这句 prefix=prefix$ 是啥意思啊？

blackold

回复 13# iocg

1. mkdir {1..5}
   
2. 
   
3. prefix=prefix$$
   
4. 
   
5. find -maxdepth 1 -type f -name '*.txt' | split -l 200000 -d -a1 - $prefix
   
6. 
   
7. for i in {1..5};do xargs -a $prefix$i -d '\n' mv -i -t $i;done
   
8. 
   
9. rm $prefix[0-9]

复制代码

原来不是我的错， 是论坛的错。

@Shell_HAT

yestreenstars

回复 13# iocg

大概是这样：

1. ls | split -l 200000
   
2. mkdir {0..4}
   
3. awk '{cmd="mv "$0" "int(NR/200000);system(cmd);close(cmd)}' x*

复制代码

iocg

回复 9# blackold


    能不能给个代码参考下呢？