免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 程序设计 › Shell › 怎么去掉重复的行？

最近访问板块

发新帖

查看: 1960 | 回复: 5

上一主题

下一主题

怎么去掉重复的行？ [复制链接]

论坛徽章:: 0

电梯直达

跳转到指定楼层

1楼 [收藏(0)] [报告]

发表于 2006-10-09 17:06 |只看该作者 |倒序浏览

例如：

192.168.0.1
192.168.0.2
192.168.0.4
192.168.0.4
192.168.0.4
192.168.0.4
192.168.0.254
192.168.0.4
192.168.0.2
192.168.0.2
192.168.0.2
192.168.0.100
192.168.0.2
192.168.0.4
192.168.0.2

怎么去掉重复的行那？

[ 本帖最后由 jackbillow 于 2006-10-9 17:07 编辑 ]

文库|博客

论坛徽章:: 1

荣誉会员
日期:2011-11-23 16:44:17

2楼 [报告]

发表于 2006-10-09 17:14 |只看该作者

http://bbs.chinaunix.net/forum/v ... p;highlight=wingger

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

3楼 [报告]

发表于 2006-10-09 17:30 |只看该作者

sort -t \. data | uniq

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

4楼 [报告]

发表于 2006-10-09 17:44 |只看该作者

谢谢！

我想到了第楼上说的。呵呵。

cat myfile |uniq

烈火兄说的 winngger写的“sort用法”，我还没有来得及看。

[ 本帖最后由 jackbillow 于 2006-10-9 17:46 编辑 ]

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

5楼 [报告]

发表于 2006-10-09 18:21 |只看该作者

sort -u

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

6楼 [报告]

发表于 2006-10-09 19:12 |只看该作者

awk '{print $1}' test.txt|sort|awk name!=$1'{name=$1;print name}'
假如test.txt 内容是你说的那个

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

发新帖

Chinaunix › 论坛 › 程序设计 › Shell › 怎么去掉重复的行？

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP