免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2605 | 回复: 7
打印 上一主题 下一主题

[文本处理] 求按照第二列取前2条记录的shell [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2016-02-02 13:59 |只看该作者 |倒序浏览
文件内容:
2016-01-01 123
2016-01-01 456
2016-01-01 789
2016-01-02 123
2016-01-02 456
2016-01-02 789
2016-01-03 123
2016-01-03 456
2016-01-03 789
2016-01-04 123
2016-01-04 456
2016-01-04 789
2016-01-05 123
2016-01-05 456
2016-01-05 789

现在想根据第二列分组获取最新的前两条记录 注:第二列是user_id,也就是获取每个用户最新的两条记录,希望结果如下:
2016-01-05 123
2016-01-05 456
2016-01-05 789
2016-01-04 123
2016-01-04 456
2016-01-04 789
求救这个shell应该怎么写?各位大神帮帮忙,研究好久了

论坛徽章:
1
操作系统版块每日发帖之星
日期:2016-02-06 06:20:00
2 [报告]
发表于 2016-02-02 14:27 |只看该作者
user_id是固定的那些数字?还是随机的?最新是什么意思,是排在最上面?还是数字最小?

论坛徽章:
54
2015亚冠之德黑兰石油
日期:2015-07-07 13:00:1615-16赛季CBA联赛之深圳
日期:2016-03-31 09:03:5415-16赛季CBA联赛之辽宁
日期:2016-05-09 20:38:15程序设计版块每日发帖之星
日期:2016-05-12 06:20:0015-16赛季CBA联赛之四川
日期:2016-05-13 15:19:4715-16赛季CBA联赛之福建
日期:2016-05-15 20:24:34每日论坛发贴之星
日期:2016-05-16 06:20:0015-16赛季CBA联赛之吉林
日期:2016-05-26 11:49:4715-16赛季CBA联赛之广东
日期:2016-05-26 13:49:18极客徽章
日期:2016-12-07 14:05:2315-16赛季CBA联赛之广夏
日期:2016-12-20 17:33:532017金鸡报晓
日期:2017-01-10 15:19:56
3 [报告]
发表于 2016-02-02 14:35 |只看该作者
  1. awk '{a[$2][2]=a[$2][1];a[$2][1]=$1}END{for(i=1;i<=2;i++)for(j in a)print a[j][i],j}' file
  2. 2016-01-05 123
  3. 2016-01-05 456
  4. 2016-01-05 789
  5. 2016-01-04 123
  6. 2016-01-04 456
  7. 2016-01-04 789
复制代码
gawk 4

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
4 [报告]
发表于 2016-02-02 14:45 |只看该作者
回复 1# zkg510168343

$ awk '{d[$2,++a[$2]%2]=$0}END{t=asort(d);for(n=t;n>0;--n)print d[n]}' FILE
2016-01-05 789
2016-01-05 456
2016-01-05 123
2016-01-04 789
2016-01-04 456
2016-01-04 123
   

论坛徽章:
30
申猴
日期:2014-04-10 09:43:532015年亚洲杯纪念徽章
日期:2015-03-20 14:40:232015亚冠之阿尔纳斯尔
日期:2015-06-02 18:59:042015亚冠之阿尔希拉尔
日期:2015-06-30 15:22:572015亚冠之大阪钢巴
日期:2015-07-20 10:44:332015亚冠之阿尔纳斯尔
日期:2015-10-28 14:57:5215-16赛季CBA联赛之新疆
日期:2015-12-25 10:18:45黑曼巴
日期:2016-06-26 21:39:5315-16赛季CBA联赛之山西
日期:2016-07-25 21:54:2715-16赛季CBA联赛之北京
日期:2016-10-27 12:07:2315-16赛季CBA联赛之八一
日期:2017-07-07 16:39:0915-16赛季CBA联赛之吉林
日期:2017-09-04 12:14:43
5 [报告]
发表于 2016-02-02 14:58 |只看该作者
本帖最后由 zxy877298415 于 2016-02-02 15:00 编辑
  1. awk '{if(a[$2]) {a[$2]=$1} if(a[$2]<$1) {a[$2]=$1} b[$2]=b[$2]?b[$2]" "$1:$1}END{for(i in a) {print a[i],i;t=split(b[i],c," "); for(j=1;j<=t;j++) {if(c[j]>k&&c[j]!=a[i]) {s=c[j]}} print s,i}}' file
复制代码
回复 1# zkg510168343


   

论坛徽章:
0
6 [报告]
发表于 2016-02-02 15:08 |只看该作者
回复 3# haooooaaa
非常感谢,虽然我测试的时候提示语法错误,但是应该是我的版本问题

   

论坛徽章:
0
7 [报告]
发表于 2016-02-02 15:09 |只看该作者
回复 4# jason680
按照你的方法果然可以了,非常感谢,确实我的问题没有描述清楚,谢谢,两位的代码我已经收藏,非常经典


   

论坛徽章:
36
摩羯座
日期:2013-09-23 16:37:312015年亚洲杯之沙特阿拉伯
日期:2015-04-14 09:10:172015亚冠之柏太阳神
日期:2015-06-25 08:48:212015亚冠之武里南联
日期:2015-07-28 09:01:082015亚冠之莱赫维亚
日期:2015-07-28 15:44:172015亚冠之柏斯波利斯
日期:2015-09-06 14:08:52白银圣斗士
日期:2015-11-25 17:06:2815-16赛季CBA联赛之吉林
日期:2015-12-09 16:59:072016猴年福章徽章
日期:2016-02-18 15:30:3415-16赛季CBA联赛之辽宁
日期:2016-04-14 09:29:04luobin
日期:2016-06-17 17:46:3615-16赛季CBA联赛之天津
日期:2016-08-16 14:11:01
8 [报告]
发表于 2016-02-03 09:17 |只看该作者
  1. awk 'a[$2]{b[$2]=a[$2]"\n"$0}{a[$2]=$0}END{for(i in b)print b[i]}'
复制代码
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP