免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 程序设计 › Shell › 如何删除某列重复的行

最近访问板块

发新帖

查看: 3446 | 回复: 3

上一主题

下一主题

如何删除某列重复的行 [复制链接]

论坛徽章:: 0

电梯直达

跳转到指定楼层

1楼 [收藏(0)] [报告]

发表于 2010-08-20 10:53 |只看该作者 |倒序浏览

原文：

Thu Aug 19 21:00:16.085 2010:       sfksfjksjfd
Thu Aug 19 21:00:16.085 2010:       a
Thu Aug 19 21:00:16.185 2010:       b
Thu Aug 19 21:00:16.285 2010:       c
Thu Aug 19 21:00:16.385 2010:       1234445
Thu Aug 19 21:00:16.485 2010:       a
Thu Aug 19 21:00:17.185 2010:       b
Thu Aug 19 21:00:17.285 2010:       c

只保留（删除最后重复的字符串）：

Thu Aug 19 21:00:16.085 2010:       sfksfjksjfd
Thu Aug 19 21:00:16.085 2010:       a
Thu Aug 19 21:00:16.185 2010:       b
Thu Aug 19 21:00:16.285 2010:       c
Thu Aug 19 21:00:16.385 2010:       1234445

这个在shell里面怎么简单时间，谢谢

文库|博客

好看的附件

论坛徽章:: 0

2楼 [报告]

发表于 2010-08-20 10:57 |只看该作者

awk '!arr[$6]++' file

复制代码

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

好看的附件

论坛徽章:: 0

3楼 [报告]

发表于 2010-08-20 11:05 |只看该作者

好像这么写更好点。。

awk '!arr[$NF]++' file

复制代码

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

4楼 [报告]

发表于 2010-08-20 12:07 |只看该作者

thanks！

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

发新帖

Chinaunix › 论坛 › 程序设计 › Shell › 如何删除某列重复的行

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP