免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 1477 | 回复: 5
打印 上一主题 下一主题

[文本处理] 如何选取重复序列的最长列 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2017-08-02 22:45 |只看该作者 |倒序浏览
碰到问题不断,不解决就没法睡觉了,求助大家

文件有四列,其中第二列和第四列分别是长度,第一列有不定时的重复,如果第一列一样,则取第二列最长的序列:
例如
a 365 g 423
a 365 hj 12
b 563 iop 41
b 563 zx 423
b 563 jk 962

结果文件显示
a 365 g 423
b 563 jk 962

感激

论坛徽章:
28
15-16赛季CBA联赛之八一
日期:2016-02-22 19:10:4215-16赛季CBA联赛之深圳
日期:2016-12-01 10:34:0415-16赛季CBA联赛之新疆
日期:2016-12-07 10:24:2915-16赛季CBA联赛之同曦
日期:2016-12-15 12:06:43CU十四周年纪念徽章
日期:2016-12-18 13:03:4415-16赛季CBA联赛之吉林
日期:2017-01-03 15:52:2515-16赛季CBA联赛之辽宁
日期:2017-01-04 14:58:2415-16赛季CBA联赛之辽宁
日期:2017-01-15 09:42:512016科比退役纪念章
日期:2017-02-06 17:21:50黑曼巴
日期:2017-02-10 15:46:1215-16赛季CBA联赛之上海
日期:2017-03-18 10:14:5415-16赛季CBA联赛之青岛
日期:2017-03-18 22:00:44
2 [报告]
发表于 2017-08-02 23:54 |只看该作者

  1. awk 'NR==FNR{if($NF>a[$1])a[$1]=$NF;next}$NF==a[$1]' f f
复制代码

?

论坛徽章:
0
3 [报告]
发表于 2017-08-03 00:21 |只看该作者
moperyblue 发表于 2017-08-02 23:54
?

谢谢,晚安

论坛徽章:
0
4 [报告]
发表于 2017-08-03 00:39 |只看该作者
本帖最后由 蓝色未央 于 2017-08-03 01:18 编辑
moperyblue 发表于 2017-08-02 23:54
?

大神,再请教一下,如果我的文件是修改之前的,例如

a 666  a 666
a 666  b 111
b 111  c 25
c 25  d 333
c 25  e 899

编程思想是,针对第一二行:
a 666  a 666
a 666  b 111

a的长度和b进行比较,取较长的,得到结果
a 666









针对第3行:
b 111  c 25
b的长度和c进行比较,取较长,理论结果是b 111,但是考虑到之前a的长度比b长,已经把b过滤掉,所以,此时输出为0。


针对第后面几行
c 25  d 333
c 25  e 899


想要得到的结果如下(c的长度和d,e进行比较,及时c之前被过滤掉,但是后续e的数值比他大,保留e):
e 899

所以最终的结果就是
a 666
e 899

比较神烦的文件,如果可以实现








论坛徽章:
8
CU十四周年纪念徽章
日期:2017-08-28 17:16:1915-16赛季CBA联赛之北控
日期:2018-03-29 11:39:0615-16赛季CBA联赛之上海
日期:2018-05-21 10:46:10技术图书徽章
日期:2018-09-03 13:54:18技术图书徽章
日期:2018-09-03 13:54:2815-16赛季CBA联赛之四川
日期:2020-10-15 09:21:4720周年集字徽章-20	
日期:2020-10-28 13:53:0220周年集字徽章-庆
日期:2020-10-28 14:09:12
5 [报告]
发表于 2017-08-03 09:47 |只看该作者
  1. awk '{a[$1,$4]=$0 ; if(b[$1]<$4) b[$1]=$4}END{for(i in b) print a[i,b[i]]}' file
复制代码

论坛徽章:
28
15-16赛季CBA联赛之八一
日期:2016-02-22 19:10:4215-16赛季CBA联赛之深圳
日期:2016-12-01 10:34:0415-16赛季CBA联赛之新疆
日期:2016-12-07 10:24:2915-16赛季CBA联赛之同曦
日期:2016-12-15 12:06:43CU十四周年纪念徽章
日期:2016-12-18 13:03:4415-16赛季CBA联赛之吉林
日期:2017-01-03 15:52:2515-16赛季CBA联赛之辽宁
日期:2017-01-04 14:58:2415-16赛季CBA联赛之辽宁
日期:2017-01-15 09:42:512016科比退役纪念章
日期:2017-02-06 17:21:50黑曼巴
日期:2017-02-10 15:46:1215-16赛季CBA联赛之上海
日期:2017-03-18 10:14:5415-16赛季CBA联赛之青岛
日期:2017-03-18 22:00:44
6 [报告]
发表于 2017-08-04 18:34 |只看该作者
回复 4# 蓝色未央


第一列重复 则 取第四列最大值 再 与不重复的进行比较?
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP