免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 1367 | 回复: 7
打印 上一主题 下一主题

[文本处理] 【已解决】求助一个AWK脚本,实现文本的处理 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2017-03-02 15:19 |只看该作者 |倒序浏览
本帖最后由 lanfeng356 于 2017-03-09 11:40 编辑

原始文本格式:
Name: name1 id-1
Name: name2 id-1
Attr: attr1
Attr: attr2
Name: name3 id-1
Name: name4 id-2
Name: name5 id-2
Name: name6 id-1
Attr: attr3
Attr: attr4

想要的格式:
name1 id-1 attr1
name1 id-1 attr2
name2 id-1 attr1
name2 id-1 attr2
name3 id-1 attr3
name3 id-1 attr4
name4 id-2 attr3
name4 id-2 attr4
name5 id-2 attr3
name5 id-2 attr4
name6 id-1 attr3
name6 id-1 attr4

大概就是这样的需求。也就是说,name的个数和attr的个数是变化的。把下面attr分别接到上面的name后面。求大神帮忙看看,谢谢

论坛徽章:
54
2015亚冠之德黑兰石油
日期:2015-07-07 13:00:1615-16赛季CBA联赛之深圳
日期:2016-03-31 09:03:5415-16赛季CBA联赛之辽宁
日期:2016-05-09 20:38:15程序设计版块每日发帖之星
日期:2016-05-12 06:20:0015-16赛季CBA联赛之四川
日期:2016-05-13 15:19:4715-16赛季CBA联赛之福建
日期:2016-05-15 20:24:34每日论坛发贴之星
日期:2016-05-16 06:20:0015-16赛季CBA联赛之吉林
日期:2016-05-26 11:49:4715-16赛季CBA联赛之广东
日期:2016-05-26 13:49:18极客徽章
日期:2016-12-07 14:05:2315-16赛季CBA联赛之广夏
日期:2016-12-20 17:33:532017金鸡报晓
日期:2017-01-10 15:19:56
2 [报告]
发表于 2017-03-02 15:32 |只看该作者
  1. awk '{if(/^N/){if(n){delete a;n=0};a[gensub($1" ","",1)]}else{for(i in a)print i,$NF;n=1}}' a | sort
复制代码

论坛徽章:
0
3 [报告]
发表于 2017-03-02 16:33 |只看该作者
回复 2# haooooaaa

非常感谢大神,就是这个数组变量,想了半天不知道怎么用。

论坛徽章:
28
15-16赛季CBA联赛之八一
日期:2016-02-22 19:10:4215-16赛季CBA联赛之深圳
日期:2016-12-01 10:34:0415-16赛季CBA联赛之新疆
日期:2016-12-07 10:24:2915-16赛季CBA联赛之同曦
日期:2016-12-15 12:06:43CU十四周年纪念徽章
日期:2016-12-18 13:03:4415-16赛季CBA联赛之吉林
日期:2017-01-03 15:52:2515-16赛季CBA联赛之辽宁
日期:2017-01-04 14:58:2415-16赛季CBA联赛之辽宁
日期:2017-01-15 09:42:512016科比退役纪念章
日期:2017-02-06 17:21:50黑曼巴
日期:2017-02-10 15:46:1215-16赛季CBA联赛之上海
日期:2017-03-18 10:14:5415-16赛季CBA联赛之青岛
日期:2017-03-18 22:00:44
4 [报告]
发表于 2017-03-02 17:29 |只看该作者

  1. awk 'NF>2{if(!f){delete a;f=1;p=0}a[$2 FS $3];next}{for(i in a)print i,$NF|"sort";if(!p){f=0;p=1}}'
复制代码

论坛徽章:
2
程序设计版块每日发帖之星
日期:2015-09-07 06:20:00程序设计版块每日发帖之星
日期:2015-09-07 06:20:00
5 [报告]
发表于 2017-03-02 19:55 |只看该作者
  1. [root@CentOS_6 experiment]# awk -F: -f a.awk a.txt | sed 's/^ //' | sort
  2. name1 id-1  attr1
  3. name1 id-1  attr2
  4. name2 id-1  attr1
  5. name2 id-1  attr2
  6. name3 id-1  attr3
  7. name3 id-1  attr4
  8. name4 id-2  attr3
  9. name4 id-2  attr4
  10. name5 id-2  attr3
  11. name5 id-2  attr4
  12. name6 id-1  attr3
  13. name6 id-1  attr4
  14. [root@CentOS_6 experiment]# cat a.awk
  15. BEGIN{counter=1}
  16. {
  17.   if($1~/Name/){
  18.     #print $2
  19.     array[counter]=$2
  20.     #print array[counter]
  21.     counter++
  22.     #print counter
  23.     next
  24.   }
  25.   else{
  26.     for(i in array){printf array[i] " " $2 "\n"}
  27.     counter=1
  28.   }
  29. }
  30. [root@CentOS_6 experiment]# cat a.txt
  31. Name: name1 id-1
  32. Name: name2 id-1
  33. Attr: attr1
  34. Attr: attr2
  35. Name: name3 id-1
  36. Name: name4 id-2
  37. Name: name5 id-2
  38. Name: name6 id-1
  39. Attr: attr3
  40. Attr: attr4
复制代码

论坛徽章:
307
程序设计版块每周发帖之星
日期:2016-04-08 00:41:33操作系统版块每日发帖之星
日期:2015-09-02 06:20:00每日论坛发贴之星
日期:2015-09-02 06:20:00程序设计版块每日发帖之星
日期:2015-09-04 06:20:00每日论坛发贴之星
日期:2015-09-04 06:20:00每周论坛发贴之星
日期:2015-09-06 22:22:00程序设计版块每日发帖之星
日期:2015-09-09 06:20:00程序设计版块每日发帖之星
日期:2015-09-19 06:20:00程序设计版块每日发帖之星
日期:2015-09-20 06:20:00每日论坛发贴之星
日期:2015-09-20 06:20:00程序设计版块每日发帖之星
日期:2015-09-22 06:20:00程序设计版块每日发帖之星
日期:2015-09-24 06:20:00
6 [报告]
发表于 2017-03-02 23:08 |只看该作者
  1. #!/usr/bin/perl
  2. use strict;
  3. use warnings;

  4. sub Display{
  5.         my $ra = shift;
  6.         foreach my $name (@{$ra->[0]}){
  7.                 print join ("\t", $name, $_), "\n" for @{$ra->[-1]};
  8.         }
  9. }

  10. my ($last_pos, $raData) = (0, []);
  11. while (<DATA>){
  12.          my $pos = 0;
  13.          $pos = 1 if (/\A(\w+)\W+(.*)/ and $1 ne 'Name');
  14.          if ($last_pos and !$pos){
  15.                  Display ($raData);
  16.                  $raData = [];
  17.          }
  18.          push (@{$raData->[$pos]}, $2);
  19.          $last_pos = $pos;
  20. }

  21. Display ($raData);

  22. __DATA__
  23. Name: name1 id-1
  24. Name: name2 id-1
  25. Attr: attr1
  26. Attr: attr2
  27. Name: name3 id-1
  28. Name: name4 id-2
  29. Name: name5 id-2
  30. Name: name6 id-1
  31. Attr: attr3
  32. Attr: attr4
复制代码

论坛徽章:
28
15-16赛季CBA联赛之八一
日期:2016-02-22 19:10:4215-16赛季CBA联赛之深圳
日期:2016-12-01 10:34:0415-16赛季CBA联赛之新疆
日期:2016-12-07 10:24:2915-16赛季CBA联赛之同曦
日期:2016-12-15 12:06:43CU十四周年纪念徽章
日期:2016-12-18 13:03:4415-16赛季CBA联赛之吉林
日期:2017-01-03 15:52:2515-16赛季CBA联赛之辽宁
日期:2017-01-04 14:58:2415-16赛季CBA联赛之辽宁
日期:2017-01-15 09:42:512016科比退役纪念章
日期:2017-02-06 17:21:50黑曼巴
日期:2017-02-10 15:46:1215-16赛季CBA联赛之上海
日期:2017-03-18 10:14:5415-16赛季CBA联赛之青岛
日期:2017-03-18 22:00:44
7 [报告]
发表于 2017-03-03 12:56 |只看该作者

  1. awk 'function s(){for(x=1;x<=length(a);x++)for(y=1;y<=length(b);y++)print a[x],b[y]}NF>2{if(!f){if(a[i])s();delete a;delete b;f=1;p=0;i=j=0}a[++i]=$2 FS $3;next}{b[++j]=$2;if(!p){f=0;p=1}}END{s()}'
复制代码

论坛徽章:
0
8 [报告]
发表于 2017-03-09 11:39 |只看该作者
使用2楼大侠的方法已经解决,感谢各位帮助。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP