免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 程序设计 › Shell › 不好意思，求个去重的awk或sed

12 / 2 页下一页

最近访问板块

发新帖

查看: 5040 | 回复: 12

上一主题

下一主题

不好意思，求个去重的awk或sed [复制链接]

论坛徽章:: 0

电梯直达

跳转到指定楼层

1楼 [收藏(0)] [报告]

发表于 2011-11-11 22:29 |只看该作者 |倒序浏览

5可用积分

本帖最后由 yuhuohu 于 2011-11-12 00:04 编辑

以下文本,要求后面的重复消息只输出最后一行，

Nov 11:12:13 aa bb cc
Nov 12：12：14 aa bb cc
Nov 12：12：15 xx bb cc

如上的2行 aa bb cc只输出最后一行的aa bb cc

输出为
Nov 12：12：14 aa bb cc
Nov 12：12：15 xx bb cc

最佳答案

查看完整内容

本帖最后由 zooyo 于 2011-11-12 00:11 编辑顺序随机:顺序输出:非数组:sed版:

文库|博客

zooyo zooyo 当前离线禁止发言好友博客消息论坛徽章: 3	2楼 [报告] 发表于 2011-11-11 22:29 \|只看该作者提示: 作者被禁止或删除内容自动屏蔽
zooyo zooyo 当前离线禁止发言好友博客消息论坛徽章: 3	实战分享：从技术角度谈机器学习入门\| 【大话IT】RadonDB低门槛向MySQL集群下战书 \| ChinaUnix打赏功能已上线！ \| 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

3楼 [报告]

发表于 2011-11-11 22:45 |只看该作者

awk '{a[$3""$4""$5]=$0}END{for(i in a) print a[i]}' file

复制代码

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

4楼 [报告]

发表于 2011-11-11 23:12 |只看该作者

多谢

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

zooyo zooyo 当前离线禁止发言好友博客消息论坛徽章: 3	5楼 [报告] 发表于 2011-11-11 23:26 \|只看该作者提示: 作者被禁止或删除内容自动屏蔽
zooyo zooyo 当前离线禁止发言好友博客消息论坛徽章: 3	实战分享：从技术角度谈机器学习入门\| 【大话IT】RadonDB低门槛向MySQL集群下战书 \| ChinaUnix打赏功能已上线！ \| 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

6楼 [报告]

发表于 2011-11-11 23:32 |只看该作者

回复 2# zooyo

顺序输出的那个，能不能把顺序颠倒一下

你现在的好像是最后的最先输出。。。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

7楼 [报告]

发表于 2011-11-11 23:33 |只看该作者

回复 5# zooyo

多问一句

能不能从指定列开始比较，比如从第六列开始是一样的，只输出最后一次出现的那行

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

zooyo zooyo 当前离线禁止发言好友博客消息论坛徽章: 3	8楼 [报告] 发表于 2011-11-11 23:42 \|只看该作者提示: 作者被禁止或删除内容自动屏蔽
zooyo zooyo 当前离线禁止发言好友博客消息论坛徽章: 3	实战分享：从技术角度谈机器学习入门\| 【大话IT】RadonDB低门槛向MySQL集群下战书 \| ChinaUnix打赏功能已上线！ \| 新一代分布式关系型数据库RadonDB知多少？

zooyo zooyo 当前离线禁止发言好友博客消息论坛徽章: 3	9楼 [报告] 发表于 2011-11-11 23:43 \|只看该作者提示: 作者被禁止或删除内容自动屏蔽
zooyo zooyo 当前离线禁止发言好友博客消息论坛徽章: 3	实战分享：从技术角度谈机器学习入门\| 【大话IT】RadonDB低门槛向MySQL集群下战书 \| ChinaUnix打赏功能已上线！ \| 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

10楼 [报告]

发表于 2011-11-12 00:04 |只看该作者

本帖最后由 yuhuohu 于 2011-11-12 00:05 编辑

回复 9# zooyo

哥们，就按空格为分界，那个冒号改成英文的冒号把，上面的例子，那就从第3列aa开始吧呵呵

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

12 / 2 页下一页

发新帖

Chinaunix › 论坛 › 程序设计 › Shell › 不好意思，求个去重的awk或sed

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP