免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2021 | 回复: 9
打印 上一主题 下一主题

[文本处理] 如何补齐使用shell补齐文件 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2013-10-17 21:43 |只看该作者 |倒序浏览
1|2|3|4|5|a
1|2|b
1|2|3|b
1|a
1|2|3|4|a

--->

1|2|3|4|5|a
1|2||||b
1|2|3|||b
1|||||a
1|2|3|4||a


请大侠帮忙使用shell补齐文件,分割符是|,每行字段数为6,如果某行少于6个字段,那么有数字的输出,后面直接加分隔符|,最后一个字段放最后。

论坛徽章:
0
2 [报告]
发表于 2013-10-17 21:50 |只看该作者
实际文件有几十万,字段有100多个,高手回复下,急。。3Q

论坛徽章:
0
3 [报告]
发表于 2013-10-17 22:23 |只看该作者
本帖最后由 yaozhibing41001 于 2013-10-17 22:25 编辑

回复 2# lovegod1206


高手这个点都睡觉了,只有我们这些菜鸟了,

论坛徽章:
10
天蝎座
日期:2013-09-22 22:32:23程序设计版块每日发帖之星
日期:2016-08-07 06:20:00lufei
日期:2016-06-17 17:38:40程序设计版块每日发帖之星
日期:2016-06-12 06:20:002016科比退役纪念章
日期:2016-05-31 15:47:20CU十四周年纪念徽章
日期:2016-05-27 12:24:562015年亚洲杯之阿曼
日期:2015-05-03 21:01:352015年辞旧岁徽章
日期:2015-03-03 16:54:15天蝎座
日期:2013-10-20 21:05:24程序设计版块每日发帖之星
日期:2016-08-11 06:20:00
4 [报告]
发表于 2013-10-17 22:41 |只看该作者

  1. awk -F"|" -vOFS="|" '{t=$NF;$NF="";for(i=1;i<6;i++){printf $i OFS}; print t}'
复制代码

论坛徽章:
0
5 [报告]
发表于 2013-10-17 22:54 |只看该作者
给你来个复杂点的。
  1. [root@localhost ~]# awk -vFS='|'  '{if(NF<6){for(i=1;i<=NF-1;i++){printf $i"|"}{for(l=1;l<=6-i;i++){printf "|"}}print $NF} else {print $0}} ' a
  2. 1|2|3|4|5|a
  3. 1|2||||b
  4. 1|2|3|||b
  5. 1|||||a
  6. 1|2|3|4||a
复制代码

论坛徽章:
0
6 [报告]
发表于 2013-10-17 22:58 |只看该作者
谢谢,解决了

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
7 [报告]
发表于 2013-10-17 23:14 |只看该作者
回复 1# lovegod1206
  1. awk -F\| 'FNR==NR{if(NF>a)a=NF;next}a>NF{b=$NF;NF--;for(i=1;i<a;i++)$i=$i;$a=b}1' OFS=\|  urfile urfile
复制代码

论坛徽章:
50
15-16赛季CBA联赛之广夏
日期:2018-11-05 09:42:462015年亚冠纪念徽章
日期:2015-07-23 11:58:122015亚冠之广州富力
日期:2015-07-07 08:26:172015亚冠之塔什干棉农
日期:2015-06-29 09:08:072015年亚洲杯之伊朗
日期:2015-03-08 20:51:012015年迎新春徽章
日期:2015-03-04 09:58:11未羊
日期:2014-10-16 22:41:47处女座
日期:2014-10-16 15:33:33酉鸡
日期:2014-03-13 12:54:10巳蛇
日期:2014-03-10 14:39:052015亚冠之德黑兰石油
日期:2015-07-29 12:46:372015亚冠之德黑兰石油
日期:2015-08-07 12:54:11
8 [报告]
发表于 2013-10-17 23:35 |只看该作者
  1. awk -F '|' '{for(i=0;i++<NF-1;)a[NR,i]=$i;b[NR]=$NF;l=l<NF?NF:l}END{for(i=0;i++<NR;){for(j=0;j++<l-1;)printf a[i,j]?a[i,j]"|":"|";print b[i]}}' file
复制代码

论坛徽章:
5
白羊座
日期:2014-10-28 11:23:27水瓶座
日期:2015-01-20 10:19:022015亚冠之柏斯波利斯
日期:2015-07-11 18:17:2015-16赛季CBA联赛之同曦
日期:2015-12-23 12:38:582016猴年福章徽章
日期:2016-02-18 15:30:34
9 [报告]
发表于 2013-10-17 23:54 |只看该作者
本帖最后由 klainogn 于 2013-10-18 00:17 编辑

awk -F'|' '{a=$NF;$NF="";$0=$1FS$2FS$3FS$4FS$5FS""a}1' a.txt
400万行 10s完成

论坛徽章:
36
摩羯座
日期:2013-09-23 16:37:312015年亚洲杯之沙特阿拉伯
日期:2015-04-14 09:10:172015亚冠之柏太阳神
日期:2015-06-25 08:48:212015亚冠之武里南联
日期:2015-07-28 09:01:082015亚冠之莱赫维亚
日期:2015-07-28 15:44:172015亚冠之柏斯波利斯
日期:2015-09-06 14:08:52白银圣斗士
日期:2015-11-25 17:06:2815-16赛季CBA联赛之吉林
日期:2015-12-09 16:59:072016猴年福章徽章
日期:2016-02-18 15:30:3415-16赛季CBA联赛之辽宁
日期:2016-04-14 09:29:04luobin
日期:2016-06-17 17:46:3615-16赛季CBA联赛之天津
日期:2016-08-16 14:11:01
10 [报告]
发表于 2013-10-18 13:36 |只看该作者
awk -F "|" '{t=$NF;$NF="";for(i=1;i<6;i++) printf $i"|";print t}'
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP