一个join的问题, 在线等

LANDEHUTU

有两个文件：
01.txt:
01:01:01
02:02:01
02:03:01
02:04:01
02:05:01
01:06:01

02.txt:
02:01:02
02:02:02
02:03:02
02:04:02
02:05:02
02:06:02

01.txt 的前两项和02.txt的前两项相关联，我现在想得到01.txt-02.txt
也就是得到：
01:01:01
01:06:01

哪位老大帮帮忙，另：需要注意效率，我的文件分别是30万和2万条
多谢多谢拉

LANDEHUTU

另：如果需要得到交集怎么办

一梦如是

1. /usr/xpg4/bin/grep -f <(comm -23 <(awk 'BEGIN{FS=OFS=":"}{print $1,$2}' file1) <(awk 'BEGIN{FS=OFS=":"}{print $1,$2}' file2)) file1

复制代码

取交集把comm的参数改为-12即可
效率不算高，一会有时间了再想想怎么写个效率高的

LANDEHUTU

可以解释一下思路和具体细节吗? 没有看懂。

一梦如是

您哪个文件是30万行的？

一梦如是

应该是01.txt？

LANDEHUTU

对

一梦如是

第一个改成

1. grep -v -f <(comm -12 <(awk 'BEGIN{FS=OFS=":"}{print $1,$2}' file1) <(awk 'BEGIN{FS=OFS=":"}{print $1,$2}' file2)) file1

复制代码

比原来的效率高不少
或

1. join -v1 -j1 <(sed 's/:/ /2' file1) <(sed 's/:/ /2' file2)|sed 's/ /:/'

复制代码

或

1. awk 'BEGIN{FS=OFS=":"}{if(NR==FNR){a[$1$2]=$0}else{if($1$2 in a){}else{print}}}' file2 file1

复制代码

您自己试试这三个哪个效率高些~别忘了告诉偶，偶也想知道

LANDEHUTU

结果如下：
1。没有命令comm；
2。Missing name for redirect.
3。执行成功

能否详细解释一下，没有看懂

寂寞烈火

原帖由 "LANDEHUTU" 发表：
结果如下：
1。没有命令comm；
2。Missing name for redirect.
3。执行成功

能否详细解释一下，没有看懂

建议楼主把自己的环境描述清楚,这样便于大家讨论