免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 1986 | 回复: 5
打印 上一主题 下一主题

这样的数据如何筛选? [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2008-01-08 10:53 |只看该作者 |倒序浏览
源文件如下:
37123456,123456789,601234020200051640,"孔霞","03",123456789,"2008/01/06",1,4000,5060.41
37123456,123456789,601234020200062521,"栗汝礼","03",123456010,"2008/01/06",1,100,110.91
37123456,123456789,601234020200069800,"柯纯龙","03",370786017,"2008/01/06",1,20000,19500
37123456,123456789,601234020200069800,"柯纯龙","03",123456030,"2008/01/06",1,31000,500
37123456,123456789,601234020200068018,"严凤书","03",123456789,"2008/01/06",2,50000,100163.39
37123456,123456789,601234020200070039,"刘庆","03",123456789,"2008/01/06",2,4000,8000
37123456,123456789,601234020200060554,"王兰英","03",123456789,"2008/01/06",1,1600,91.26
37123456,123456789,601234020200070039,"刘庆","03",123456789,"2008/01/06",2,4000,4000
37123456,123456789,601234020200067710,"罗有艳","03",123456789,"2008/01/06",2,3000,12012.01
37123456,123456789,601234020200064742,"孙祥婷","03",123456789,"2008/01/06",1,50,12.61
37123456,123456789,601234020200069800,"柯纯龙","03",123456030,"2008/01/06",1,200,300
37123456,123456789,601234020200060554,"王兰英","03",123456789,"2008/01/06",1,1000,1091.26
处理要求如下:
如果第三列中的数据是唯一的,就保留这一行,如果有重复的,就保留最后一个记录行。

源文件格式如图:

[ 本帖最后由 jiaoli 于 2008-1-8 10:57 编辑 ]

test.JPG (66.01 KB, 下载次数: 36)

test.JPG

论坛徽章:
0
2 [报告]
发表于 2008-01-08 10:54 |只看该作者
格式乱了,我发一个源文件上来。

test.zip

380 Bytes, 下载次数: 27

论坛徽章:
0
3 [报告]
发表于 2008-01-08 10:57 |只看该作者

  1. awk -F, '{a[$3]=$0}END{for( i in a)print a[i]}' urfile
复制代码

论坛徽章:
0
4 [报告]
发表于 2008-01-08 11:17 |只看该作者
awk真是无所不能,成了!谢谢楼上朋友!

论坛徽章:
0
5 [报告]
发表于 2008-01-08 21:18 |只看该作者
原帖由 davistar 于 2008-1-8 10:57 发表

awk -F, '{a[$3]=$0}END{for( i in a)print a}' urfile


awk 数组的经典用法,很喜欢awk的数组下标可以任意组合

论坛徽章:
0
6 [报告]
发表于 2008-01-09 17:31 |只看该作者
8错
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP