免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 3034 | 回复: 10
打印 上一主题 下一主题

如何用AWK删除文件中相同的行,求助…… [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2006-11-07 10:33 |只看该作者 |倒序浏览
#cat test
111
111
222
333

awk 'BEGIN{if(tmp=$1) {print $1} else{$1!=tmp; print tmp}}' test
不知道怎么写,试了好久……求助啊!!!

论坛徽章:
1
荣誉会员
日期:2011-11-23 16:44:17
2 [报告]
发表于 2006-11-07 10:38 |只看该作者
用uniq即可,

  1. uniq -u <urfile
复制代码

论坛徽章:
0
3 [报告]
发表于 2006-11-07 10:58 |只看该作者
就是用uniq多好!

论坛徽章:
0
4 [报告]
发表于 2006-11-07 11:08 |只看该作者
如果原文件内容是未排序的,需要先排序才能用uniq
cat test |sort |uniq

论坛徽章:
0
5 [报告]
发表于 2006-11-07 11:14 |只看该作者
呵呵!sort -u好象也还行~
就是看看AWK有没有什么解决办法,谢谢各位拉~~:P

论坛徽章:
0
6 [报告]
发表于 2006-11-07 14:03 |只看该作者
原帖由 huye 于 2006-11-7 11:14 发表
就是看看AWK有没有什么解决办法,谢谢各位拉~~:P
  1. awk '!a[$0]++' u.file
复制代码

论坛徽章:
0
7 [报告]
发表于 2006-11-07 14:27 |只看该作者
楼上的方法很好,仰慕下下:D

论坛徽章:
0
8 [报告]
发表于 2006-11-08 00:02 |只看该作者

回复 6楼 vio 的帖子

awk '!a[$0]++' u.file,
能否请问一下这句如何理解,没有看懂呢,能实现,但是原理没有理解,谢谢先!

论坛徽章:
0
9 [报告]
发表于 2006-11-08 09:30 |只看该作者
!a[$0]为真的时候 做了print所有的   然后再+1
一开始数组的各项都是"0",......然后这个就理解了
111    首先 a[111]为0,则!a[111]为真,!a[111]++后为1了,print
111    这次a[111]为1,则!a[111]为假,那就不打印
222
333

论坛徽章:
0
10 [报告]
发表于 2006-11-08 10:00 |只看该作者
原帖由 vio 于 2006-11-7 14:03 发表

  1. awk '!a[$0]++' u.file
复制代码

思维活跃!
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP