免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 程序设计 › Shell › 如何用awk按组合关键字删除重复行

1 2 3 45 / 5 页

最近访问板块

发新帖

楼主: useinxinuanihc

上一主题

下一主题

如何用awk按组合关键字删除重复行 [复制链接]

论坛徽章:: 0

41楼 [报告]

发表于 2010-05-21 16:40 |只看该作者

回复 39# useinxinuanihc

牛人，打这个得需要不少时间吧？

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

42楼 [报告]

发表于 2010-05-21 16:50 |只看该作者

回复 41# bbgg1983

呵呵,学习顺便给大家分享嘛

也算是对朋友们的答谢啦

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

43楼 [报告]

发表于 2010-05-21 22:54 |只看该作者

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

44楼 [报告]

发表于 2010-05-23 18:40 |只看该作者

mark 回去慢慢研究

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

45楼 [报告]

发表于 2010-05-25 11:59 |只看该作者

学习了，支持这种分析，谢谢

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

46楼 [报告]

发表于 2010-05-27 15:47 |只看该作者

awk '{a[$1]=(a[$1]+$2)} END {for(b in a)print b,a[b]}' file

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

47楼 [报告]

发表于 2010-06-30 10:58 |只看该作者

跟楼上差不多

awk '{a[$1]=$2;}END{for(i in a){if (a[i]!=0){print i,a[i];}else{print i,0;}}}' urfile630
PBCSPOFT0101 96
PBCSPOFT0102 6
PBCSPOFT0103 8
PBCSPOFT0104 0
PBCSPOFT0105 0
PBCSPOFT0106 0
PBCSPOFT0107 10
PBCSPOFT0108 0

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

48楼 [报告]

发表于 2010-07-28 17:08 |只看该作者

aiji_118.M d0155049656e5c1796820e05e00ce445 *
aiji_130.Ma 254508b6df6bfa20a641f3f339dfdf98 *
aiji_130.M fa015b1abb23c53810822dafb482be91 *
aiji_130.M fa015b1abb23c53810822dafb482be91 *

呃，同样的问题，想去掉第二列是重复的，貌似执行没结果。。。

cat max.md5 | awk '{a[$2]++;next}a[$2]==1 {print $0}'

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

1 2 3 45 / 5 页

发新帖

Chinaunix › 论坛 › 程序设计 › Shell › 如何用awk按组合关键字删除重复行

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP