免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: heracai
打印 上一主题 下一主题

[文本处理] 每隔1000行,取一行重新排列 [复制链接]

论坛徽章:
0
11 [报告]
发表于 2013-07-07 21:51 |只看该作者
回复 9# heracai

第二行开始

  1. sed -n -e '1d' -f tmp.sed yourdatafile.txt > your targetfile.txt
复制代码
第三行开始

  1. sed -n -e '1,2d' -f tmp.sed yourdatafile.txt > your targetfile.txt
复制代码
第四行开始

  1. sed -n -e '1,3d' -f tmp.sed yourdatafile.txt > your targetfile.txt
复制代码
。。。。。。


也许应该,考虑建立一个脚本自动生成上述代码,然后再执行。

   

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
12 [报告]
发表于 2013-07-07 21:53 |只看该作者
回复 1# heracai


    目测是这个意思:
  1. for i in `seq 59`; do awk "NR%1000==$i"  urfile ; done
复制代码

论坛徽章:
6
摩羯座
日期:2013-08-24 10:43:10狮子座
日期:2013-08-25 10:27:06天秤座
日期:2013-09-11 20:28:44午马
日期:2014-09-28 16:06:0015-16赛季CBA联赛之八一
日期:2016-12-19 13:55:0515-16赛季CBA联赛之天津
日期:2016-12-20 14:01:23
13 [报告]
发表于 2013-07-07 21:54 |只看该作者
  1. seq 60000 >file
  2. awk '{if(NR%1000<=100 && NR%1000>=1)print  $0}' file
复制代码
  1. for i in $(seq 100); do for((k=0;k<=59;k++)) ; do echo $(($i+$k*1000)); done; done
复制代码
@heracai
上面两条命令的输出是一致的话,就是对的
也可能我理解错你的意思了?

你是不是要 echo语句输出的那些行号的行?

论坛徽章:
6
摩羯座
日期:2013-08-24 10:43:10狮子座
日期:2013-08-25 10:27:06天秤座
日期:2013-09-11 20:28:44午马
日期:2014-09-28 16:06:0015-16赛季CBA联赛之八一
日期:2016-12-19 13:55:0515-16赛季CBA联赛之天津
日期:2016-12-20 14:01:23
14 [报告]
发表于 2013-07-07 22:04 |只看该作者
[quote]for i in $(seq 1000)
do
   for((k=0;k<=59;k++))
     do awk -v u=$i -v t=$k '{if (NR==u+t*1000) {print}}' 1.txt >> 0.txt
     echo  echo $(($i+$k*1000))
   done
done


NR==u+t*1000  其中u就是$i, t就是$k

请问echo $(($i+$k*1000) 出的行号 不就是 u+t*1000的行号吗?[/quote]

这些行号的特点不是 除1000 余数在1-100之间吗?

论坛徽章:
6
摩羯座
日期:2013-08-24 10:43:10狮子座
日期:2013-08-25 10:27:06天秤座
日期:2013-09-11 20:28:44午马
日期:2014-09-28 16:06:0015-16赛季CBA联赛之八一
日期:2016-12-19 13:55:0515-16赛季CBA联赛之天津
日期:2016-12-20 14:01:23
15 [报告]
发表于 2013-07-07 23:44 |只看该作者
@heracai
不好意思看错了, 把seq 1000 看成100了!

论坛徽章:
1
技术图书徽章
日期:2013-09-25 21:06:29
16 [报告]
发表于 2013-07-07 23:44 |只看该作者
回复 2# waker


    waker兄,这个语句能解释下吗   print >NR%1000 这个是啥意思啊?

论坛徽章:
6
摩羯座
日期:2013-08-24 10:43:10狮子座
日期:2013-08-25 10:27:06天秤座
日期:2013-09-11 20:28:44午马
日期:2014-09-28 16:06:0015-16赛季CBA联赛之八一
日期:2016-12-19 13:55:0515-16赛季CBA联赛之天津
日期:2016-12-20 14:01:23
17 [报告]
发表于 2013-07-07 23:48 |只看该作者
@关阴月飞
我们都理解错了
人家是
  1. awk '{print >NR%1000".outfile"}' file ;for((i=1;i<=999;i++)); do cat $i.outfile ; done;cat 0.outfile
复制代码
这个要求

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
18 [报告]
发表于 2013-07-08 00:39 |只看该作者
本帖最后由 关阴月飞 于 2013-07-08 00:46 编辑

回复 17# cao627


    如果真是这个意思, 改一下就好了,不过效率方面肯定是不如先分成小文件再合并来的快:
  1. for i in `seq 999`; do awk "NR%1000==$i"  urfile ; done
复制代码

论坛徽章:
6
摩羯座
日期:2013-08-24 10:43:10狮子座
日期:2013-08-25 10:27:06天秤座
日期:2013-09-11 20:28:44午马
日期:2014-09-28 16:06:0015-16赛季CBA联赛之八一
日期:2016-12-19 13:55:0515-16赛季CBA联赛之天津
日期:2016-12-20 14:01:23
19 [报告]
发表于 2013-07-08 08:18 |只看该作者
本帖最后由 cao627 于 2013-07-08 08:19 编辑

@关阴月飞是的,效率他那个高,而且还要写一条NR%1000==0的命令放到最后

论坛徽章:
8
摩羯座
日期:2014-11-26 18:59:452015亚冠之浦和红钻
日期:2015-06-23 19:10:532015亚冠之西悉尼流浪者
日期:2015-08-21 08:40:5815-16赛季CBA联赛之山东
日期:2016-01-31 18:25:0515-16赛季CBA联赛之四川
日期:2016-02-16 16:08:30程序设计版块每日发帖之星
日期:2016-06-29 06:20:002017金鸡报晓
日期:2017-01-10 15:19:5615-16赛季CBA联赛之佛山
日期:2017-02-27 20:41:19
20 [报告]
发表于 2013-07-08 08:19 |只看该作者
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP