免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 程序设计 › Shell › 关于查找文件重复的记录。

最近访问板块

发新帖

查看: 1829 | 回复: 3

上一主题

下一主题

关于查找文件重复的记录。 [复制链接]

论坛徽章:: 0

电梯直达

跳转到指定楼层

1楼 [收藏(0)] [报告]

发表于 2005-10-24 20:31 |只看该作者 |倒序浏览

文件的格式如下：
6572:387490:9800:9033
8590:294804:90:9890
8900:294804:90:9890
98000:899:900:9840
每个字段是用:分割
现在想找出文件中有多个字段一样的记录。
如例中的
8590:294804:90:9890
8900:294804:90:9890
他有3个字段重复。

请各位大虾帮帮忙，最好能给出完整的命令，谢谢各位了！

文库|博客

论坛徽章:: 0

2楼 [报告]

发表于 2005-10-25 19:37 |只看该作者

关于查找文件重复的记录。

怎么没有人回复啊，拜托各位大虾啊，本人有急用啊。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

3楼 [报告]

发表于 2005-10-25 20:42 |只看该作者

关于查找文件重复的记录。

sort file |uniq -c |awk '/$1>1/ {print $2;}'

你试一下,,家里没环境,,我测试不了awk写的对不对.

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

4楼 [报告]

发表于 2005-10-26 20:38 |只看该作者

关于查找文件重复的记录。

谢谢这位热心的朋友,我已经解决了.

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

发新帖

Chinaunix › 论坛 › 程序设计 › Shell › 关于查找文件重复的记录。

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP