免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 5169 | 回复: 6
打印 上一主题 下一主题

这个文件对比如何实现呢? [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2005-03-28 15:04 |只看该作者 |倒序浏览
将文件一中的号码包含在文件二(记录有50万条以上)中的记录导出来
比如:
文件一:

10/05766798607,11/20050325191329,29/0.1,14/05766798607
10/05767158557,11/20050325191329,29/0.08,14/05767158557

文件二:
05766798607
05766798608
05766798609
通过文件一和文件二对比,导出这样的文件出来.
10/05766798607,11/20050325191329,29/0.1,14/05766798607

论坛徽章:
0
2 [报告]
发表于 2005-03-28 15:11 |只看该作者

这个文件对比如何实现呢?

哪位热心人能提供高效的处理方法,谢谢了!

论坛徽章:
1
荣誉会员
日期:2011-11-23 16:44:17
3 [报告]
发表于 2005-03-28 16:11 |只看该作者

这个文件对比如何实现呢?

就知道这个比较简单,不知道什么高效不高效的!
grep -f fileb filea

论坛徽章:
0
4 [报告]
发表于 2005-03-28 16:18 |只看该作者

这个文件对比如何实现呢?

建议使用awk
全部导入内存后再查找这样时间要短些,节约io时间
或者用c,效率更高,
最好用数据库,效率最高。。。

论坛徽章:
0
5 [报告]
发表于 2005-03-28 16:28 |只看该作者

这个文件对比如何实现呢?

代码如下:
忙了,你自己改一下吧,这个是对比2个文件中相同的dd,
原来用过10w的数据,比grep快很多

  1. nawk 'NR==FNR{a[$1]=$2}NR!=FNR&&($1 in a){$1=$1" "a[$1];print}'
复制代码

论坛徽章:
0
6 [报告]
发表于 2011-03-31 15:40 |只看该作者
while read i
do
grep $i a
done < b

论坛徽章:
1
2015年辞旧岁徽章
日期:2015-03-03 16:54:15
7 [报告]
发表于 2011-03-31 15:49 |只看该作者
一般简单的就是高效的,老长一段awk看着就犯愁
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP