免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 5424 | 回复: 12
打印 上一主题 下一主题

awk 找出相同的行 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2010-09-15 15:21 |只看该作者 |倒序浏览
比如
a 23 45 23 45 34 36 23 45
b 23 45 23 45 34 36 23 45
c 23 53 23 56 23 45 67 23
.
.
.
n 23 45 64 23 53 23 64 23
把相同的行找出来 打印 如:

a 23 45 23 45 34 36 23 45
b 23 45 23 45 34 36 23 45

论坛徽章:
0
2 [报告]
发表于 2010-09-15 15:21 |只看该作者
这个是第一种
如果考虑有一个不匹配也打印

论坛徽章:
0
3 [报告]
发表于 2010-09-15 15:30 |只看该作者
找相同的:
  1. awk '{for(t=2;t<=NF;t++){s=$t" "s};a[s]=a[s]"@"$1;s=""}END{for(k in a){print a[k],k}}' data
复制代码

论坛徽章:
0
4 [报告]
发表于 2010-09-15 15:32 |只看该作者
多谢 我慢慢理解下

论坛徽章:
0
5 [报告]
发表于 2010-09-15 15:33 |只看该作者
这个好像是全匹配的

论坛徽章:
0
6 [报告]
发表于 2010-09-15 15:40 |只看该作者
grep -vFf <(uniq -f1 -u file) file

论坛徽章:
1
2015年辞旧岁徽章
日期:2015-03-03 16:54:15
7 [报告]
发表于 2010-09-15 15:44 |只看该作者
uniq -f1 -D ufile
我觉着这样就行

论坛徽章:
0
8 [报告]
发表于 2010-09-15 15:54 |只看该作者
多谢 有没有办法让一个不匹配也行

论坛徽章:
0
9 [报告]
发表于 2010-09-15 16:01 |只看该作者
awk '{v=$0;sub("^"$1" +","",v);b[v]++;a[v]=v in a?a[v]"\n"$0:a[v]}END{for (j in b) if (b[v]>1) print a[v]}' file

论坛徽章:
0
10 [报告]
发表于 2010-09-15 16:11 |只看该作者
真实数据中间可能有空格.是不是要用数字填了
CY14    172     179     198     198     220     220     274     278     138     138     254     254     211     211     189     189     228     228     140     140     177     177     121     121     203     207
CY15    157     172     198     198     220     220     278     278     138     140     254     254     207     211     189     189     228     228     138     140     177     177     121     121     203     207
CY16    164     168                                                                     257     257     208     208     189     191                                                     123     123     208     210
CY17    172     179     192     192     220     225     278     278     138     138     254     254     207     207     189     189     226     226     140     140     177     177     121     121     203     207
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP