免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2081 | 回复: 4
打印 上一主题 下一主题

[文本处理] 跨文件提取范围行 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2018-05-28 15:05 |只看该作者 |倒序浏览
本帖最后由 trxz2001 于 2018-05-28 15:21 编辑

请教一下各位大神,有两个文件,如何根据file b的二三列的范围将对应file a的第一列所在的行打印出来?

cat a

1 0
2 0
3 0
4 1
5 1
6 2
7 2

cat b

AAA 1 5
BBB 3 7

希望结果为

AAA 1 0
AAA 2 0
AAA 3 0
AAA 4 1
BBB 3 0
BBB 4 1
BBB 5 1
BBB 6 2

谢谢





论坛徽章:
0
2 [报告]
发表于 2018-05-28 15:19 |只看该作者
小弟自己写了一个

awk 'NR==FNR{a[NR]=$2;b[NR]=$3;c[NR]=$1;d++}NR!=FNR{for(i=1;i<=d;i++){if($1>=a&&$1<b){print c"\t" $0 }}}' b  a > c

但是效率太低,file a 有1亿行左右,要跑好久,因为file a 是从1开始连续的,所以想请问有没有什么方便的方法可以直接截取行,而不需要一行行判断呢?

论坛徽章:
25
程序设计版块每日发帖之星
日期:2016-05-03 06:20:0015-16赛季CBA联赛之八一
日期:2018-07-05 10:34:09黑曼巴
日期:2018-07-06 15:19:5015-16赛季CBA联赛之佛山
日期:2018-08-03 13:19:3315-16赛季CBA联赛之山西
日期:2018-08-07 19:46:2315-16赛季CBA联赛之广夏
日期:2018-08-08 19:31:5015-16赛季CBA联赛之青岛
日期:2018-11-26 15:21:5015-16赛季CBA联赛之上海
日期:2018-12-11 09:45:3219周年集字徽章-年
日期:2020-04-18 23:54:5215-16赛季CBA联赛之深圳
日期:2020-04-19 21:40:19黑曼巴
日期:2022-04-03 17:55:1315-16赛季CBA联赛之八一
日期:2018-07-03 16:56:46
3 [报告]
发表于 2018-05-29 15:32 |只看该作者
本帖最后由 wh7211 于 2018-05-29 15:42 编辑

回复 1# trxz2001


  1. awk 'FILENAME==ARGV[1]{a[$1]=$2;b[$1]=$3;next}{for(i in a){if($1+0>=a[i]&&$1+0<b[i]){print i" "$0}}}' 2 1
  2. AAA 1 0
  3. AAA 2 0
  4. AAA 3 0
  5. BBB 3 0
  6. AAA 4 1
  7. BBB 4 1
  8. BBB 5 1
  9. BBB 6 2
复制代码

论坛徽章:
0
4 [报告]
发表于 2018-05-31 14:49 |只看该作者
回复 3# wh7211

谢谢大神,不过现在最大的问题是速度问题,能否awk 联用 grep -A 5 直接提取行,这样是不是会快一些? 还是需要我把文件拆分后在run会快一些呢?

论坛徽章:
25
程序设计版块每日发帖之星
日期:2016-05-03 06:20:0015-16赛季CBA联赛之八一
日期:2018-07-05 10:34:09黑曼巴
日期:2018-07-06 15:19:5015-16赛季CBA联赛之佛山
日期:2018-08-03 13:19:3315-16赛季CBA联赛之山西
日期:2018-08-07 19:46:2315-16赛季CBA联赛之广夏
日期:2018-08-08 19:31:5015-16赛季CBA联赛之青岛
日期:2018-11-26 15:21:5015-16赛季CBA联赛之上海
日期:2018-12-11 09:45:3219周年集字徽章-年
日期:2020-04-18 23:54:5215-16赛季CBA联赛之深圳
日期:2020-04-19 21:40:19黑曼巴
日期:2022-04-03 17:55:1315-16赛季CBA联赛之八一
日期:2018-07-03 16:56:46
5 [报告]
发表于 2018-05-31 17:09 |只看该作者
回复 4# trxz2001


根据实际文件大小把文件拆分一下再处理会好一些
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP