免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 2395 | 回复: 17

[文本处理] 如何随机取N个文件合并输出一个文件 [复制链接]

论坛徽章:
0
发表于 2017-03-24 19:15 |显示全部楼层
shell如何随机取一个目录下N个文件合并输出一个文件,并且可以设定输出多少个文件。求大神指点

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
发表于 2017-03-27 10:17 |显示全部楼层
本帖最后由 关阴月飞 于 2017-03-27 10:21 编辑

假设目录下没有子目录,比如随机取3个, 是这个意思不?
  1. cat `ls |shuf -n 3` >outfile
复制代码

论坛徽章:
0
发表于 2017-03-27 11:03 |显示全部楼层
回复 2# 关阴月飞

是的,就一个目录下的文件,没有子目录,比如我a目录下,有100个文件,我随机取3个就输出一个文件,如果这个随机取想输出300个文件,那就循环输出300个。请问这个shell怎么写

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
发表于 2017-03-27 11:29 |显示全部楼层
fredchan 发表于 2017-03-27 11:03
回复 2# 关阴月飞

是的,就一个目录下的文件,没有子目录,比如我a目录下,有100个文件,我随机取3个就 ...

只有100个文件,要随机取300个? 这个没理解

论坛徽章:
29
程序设计版块每日发帖之星
日期:2016-02-29 06:20:0015-16赛季CBA联赛之天津
日期:2016-08-10 10:33:1115-16赛季CBA联赛之深圳
日期:2016-08-17 15:07:2015-16赛季CBA联赛之佛山
日期:2016-11-07 11:33:5015-16赛季CBA联赛之广夏
日期:2016-11-15 09:13:31CU十四周年纪念徽章
日期:2016-11-24 14:12:25极客徽章
日期:2016-12-07 14:03:4015-16赛季CBA联赛之深圳
日期:2016-12-07 17:15:2715-16赛季CBA联赛之北京
日期:2016-12-22 09:30:0115-16赛季CBA联赛之深圳
日期:2016-12-22 10:49:2115-16赛季CBA联赛之山西
日期:2017-02-10 09:05:3215-16赛季CBA联赛之同曦
日期:2017-02-27 14:19:08
发表于 2017-03-27 11:55 |显示全部楼层
随机取300次, 每次取3个, 然后生成300个目标文件

论坛徽章:
0
发表于 2017-03-28 12:11 |显示全部楼层
回复 4# 关阴月飞

随机取300次, 每次取3个, 然后生成300个目标文件 下面大神解释了

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
发表于 2017-03-28 12:38 |显示全部楼层
本帖最后由 关阴月飞 于 2017-03-29 13:44 编辑

回复 6# fredchan

加循环就好了呀
for i in {1..300}
do
    cat `ls |shuf -n 3` >/xxoo/out_file_$i
done


论坛徽章:
0
发表于 2017-03-28 16:57 |显示全部楼层
回复 7# 关阴月飞

这个跑了下,不太懂怎么用,比如我的文件夹是/a a下有100个文件,要输出到a目录下的b目录 /a/b   这个怎么改造?

论坛徽章:
0
发表于 2017-03-28 17:01 |显示全部楼层
回复 7# 关阴月飞

QQ图片20170328170033.png 跑了一下,输入文件是输出文件?

论坛徽章:
0
发表于 2017-03-28 19:11 |显示全部楼层
#!/bin/bash
list=`ls -l  ./dir |awk -F' ' '{print $9}' |grep -v ^$ > list.txt`
file=`shuf -n 2 list.txt`
date=`date +'%M%S'`
for i in $file
do
        cat ./dir/$i >> $date.out
done

这是一个朋友叫运维写的demo,我也没跑出来,找不到文件,我把dir改成自己目录也搞不定,不懂
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP