问一个shell的问题

arcow

有文件a.txt
数据格式为(一行一条记录)
1
2
3
4

文件b.txt(一行一条记录，共3列\t分开)
1   aa  bbb
9   ccc  cccc
10  dfdsf fdsfsd
3    fdsfs  332

现在想把a.txt的每一行与b.txt中的第一列进行对比，如果相同，则把b.txt那一行删除掉
显然1,3这个数字二个文件都有，那么要把 b.txt文件中第一列含1和3的那行删除掉
这样得到文件
9   ccc  cccc
10  dfdsf fdsfsd

lkk2003rty

1. [oracle@s12071 ~]$ awk 'FNR==NR{a[$0];next}{if(!($1 in a))print}' file file1
   
2. 9   ccc  cccc
   
3. 10  dfdsf fdsfsd
   
4. [oracle@s12071 ~]$ cat file
   
5. 1
   
6. 2
   
7. 3
   
8. 4
   
9. [oracle@s12071 zhaob]$ cat file1
   
10. 1   aa  bbb
    
11. 9   ccc  cccc
    
12. 10  dfdsf fdsfsd
    
13. 3    fdsfs  332
    
14. [oracle@s12071 ~]$

复制代码

昭襄王

grep -vwf a.txt b.txt
9   ccc  cccc
10  dfdsf fdsfsd

arcow

grep -vwf a.txt b.txt
9   ccc  cccc
10  dfdsf fdsfsd
昭襄王 发表于 2010-11-04 17:23

    这个不能指定对某一列比较

arcow

lkk2003rty 发表于 2010-11-04 17:21

    如果文件有30G那么大怎么办呢

dibug

grep -vwf a.txt b.txt
9   ccc  cccc
10  dfdsf fdsfsd
昭襄王 发表于 2010-11-04 17:23

    这个比较强

昭襄王

b.txt:
1        aa  bbb
9        ccc  cccc
10        dfdsf fdsfsd
3        fdsfs  332
11        3
grep -vwf <(sed 's/^/\^/' a.txt) b.txt
9       ccc  cccc
10      dfdsf fdsfsd
11      3

昭襄王

这个不能指定对某一列比较
arcow 发表于 2010-11-04 17:25

    可以强制第一列，见7楼

lkk2003rty

回复 5# arcow


    那个是b.txt吧。。。那用split把b.txt拆分成几个小文件，然后照样awk。。。。