免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2364 | 回复: 9
打印 上一主题 下一主题

shell如何得到一个文件里相同的行 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2008-02-20 21:04 |只看该作者 |倒序浏览
1.txt
43 141
31 3
43 111
21 5
92 3
31 52
62 2
43 1
75 9
我想要得到下面这个结果。
2.txt
31 3
31 52
43 1
43 111
43 141
请问怎么用shell得到这样子的结果?
#!/bin/bash
awk '{print $1,$2}' 1.txt |sort > 2.txt

论坛徽章:
0
2 [报告]
发表于 2008-02-20 21:31 |只看该作者

  1. shtest$ cat a.txt
  2. 43 141
  3. 31 3
  4. 43 111
  5. 21 5
  6. 92 3
  7. 31 52
  8. 62 2
  9. 43 1
  10. 75 9

  11. shtest$ awk '{a[$1]++;b[$1""a[$1]]=$0} END{ for (i in a) if (a[i]>1) for (j=1;j<=a[i];j++) print b[i""j]}' a.txt
  12. 31 3
  13. 31 52
  14. 43 141
  15. 43 111
  16. 43 1
复制代码

[ 本帖最后由 jinl 于 2008-2-21 11:23 编辑 ]

论坛徽章:
0
3 [报告]
发表于 2008-02-20 21:57 |只看该作者
是不是就是一个二维的for?

论坛徽章:
0
4 [报告]
发表于 2008-02-20 22:10 |只看该作者
原帖由 mousejsh 于 2008-2-20 21:57 发表
是不是就是一个二维的for?

二维数组,当然要用两次for来遍历了

还有一个办法,通过两次读入文件来处理
awk 'NR==FNR {a[$1]++} NR>FNR {if (a[$1]>1) print $0}' ufile ufile

[ 本帖最后由 jinl 于 2008-2-20 22:21 编辑 ]

论坛徽章:
23
15-16赛季CBA联赛之吉林
日期:2017-12-21 16:39:27白羊座
日期:2014-10-27 11:14:37申猴
日期:2014-10-23 08:36:23金牛座
日期:2014-09-30 08:26:49午马
日期:2014-09-29 09:40:16射手座
日期:2014-11-25 08:56:112015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:49:0315-16赛季CBA联赛之山东
日期:2017-12-21 16:39:1915-16赛季CBA联赛之广东
日期:2016-01-19 13:33:372015亚冠之山东鲁能
日期:2015-10-13 09:39:062015亚冠之西悉尼流浪者
日期:2015-09-21 08:27:57
5 [报告]
发表于 2008-02-21 09:38 |只看该作者
  1. awk '{(++a[$1]==1)?b[$1]=$0:b[$1]=$0"\n"b[$1]}END{for(i in a) if(a[i]>1) print b[i]}' urfile
复制代码

论坛徽章:
0
6 [报告]
发表于 2008-02-21 10:11 |只看该作者
cat 1.txt |sort -k1 -n|grep ^[^2679]

论坛徽章:
5
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:50:282015年亚洲杯之朝鲜
日期:2015-03-13 22:47:33IT运维版块每日发帖之星
日期:2016-01-09 06:20:00IT运维版块每周发帖之星
日期:2016-03-07 16:27:44
7 [报告]
发表于 2008-02-21 10:33 |只看该作者
原帖由 mousejsh 于 2008-2-20 21:04 发表
1.txt
43 141
31 3
43 111
21 5
92 3
31 52
62 2
43 1
75 9
我想要得到下面这个结果。
2.txt
31 3
31 52
43 1
43 111
43 141
请问怎么用shell得到这样子的结果?
#!/bin/bash
awk '{print $ ...

  1.   comm -13 <(sort 1.txt|uniq -w 2 -u) <(sort 1.txt)
复制代码

论坛徽章:
0
8 [报告]
发表于 2008-02-21 11:00 |只看该作者
sort 1.txt|awk '{if($1==a){if(c) print b;print $0;c=0}else{c=1} a=$1;b=$0;}'

论坛徽章:
0
9 [报告]
发表于 2008-02-21 11:06 |只看该作者
我有个问题
我写的代码是nawk 'a[$1]++ END{if(a[$1]>0) print}' 1.txt
为什么出来的结果是
43 111
31 52
43 1
错在哪里呢?
望指教

论坛徽章:
0
10 [报告]
发表于 2008-02-21 12:08 |只看该作者
awk '{a[$1]++}END{while(getline<"filename"){if(a[$1]>1) print}}' filename | sort
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP