使用AWK选取相同字段并打印

xuezhonghuo

有两个文件：
# cat a
13407736618|07712350965|20140602000036|20140602000335|27|27|0|
077113607713712|07762618985|20140601231824|20140602000528|1413|1413|0|
# cat b
0|213|1|1|07712350965|213213|13407736618|2000|127|07712350965|20140602000036|20140602000335|180|27||8|0||||27|0|0|13407736618|27|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|1|1|1|07713912575|-1||0|0|27|0|
0|213|1|1|07762618985|213213|077113607713712|2004|127|07762618985|20140601231824|20140602000528|2824|1413||10|0||||1413|0|0|013607713712|1413|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|1|1|0||-1||0|0|1413|0|


使用awk查询b文件中

1、  a是从b里面取的某些行记录，但仅为部分字段

如附件的样例

a的内容如下

13407736618|07712350965|20140602000036|20140602000335|27|27|0|

077113607713712|07762618985|20140601231824|20140602000528|1413|1413|0|

b的内容中，有两条记录与上述的有关联，如下

0|213|1|1|07712350965|213213|13407736618|2000|127|07712350965|20140602000036|20140602000335|180|27||8|0||||27|0|0|13407736618|27|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|1|1|1|07713912575|-1||0|0|27|0|

0|213|1|1|07762618985|213213|077113607713712|2004|127|07762618985|20140601231824|20140602000528|2824|1413||10|0||||1413|0|0|013607713712|1413|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|0|1|1|0||-1||0|0|1413|0|

2、  使用awk来生成两个文件

1）  从b里剔除a中有的行，生成一个文件other.unl

2）  从b里提取a中有的行，生成一个文件in.unl

3）  也就是说这两个文件合并就是原来的b

expert1

这 不是月经问题吗，grep似乎都能搞掂的。

关阴月飞

回复 1# xuezhonghuo


    grep 行不行:

1）  从b里剔除a中有的行，生成一个文件other.unl    #grep -vf a b >other.unl

2）  从b里提取a中有的行，生成一个文件in.unl   #grep -f a b >in.unl

关阴月飞

awk:
1）  从b里剔除a中有的行，生成一个文件other.unl    #awk 'FNR==NR{a[NR]=$0;next}!/a[FNR]/' a b >other.unl

2）  从b里提取a中有的行，生成一个文件in.unl         #awk 'FNR==NR{a[NR]=$0;next}/a[FNR]/' a b >in.unl


合在一起：

1. awk 'FNR==NR{a[NR]=$0;next}!/a[FNR]/{print >"other.unl";next}{print > "in.unl"}' a b

复制代码

jason680

回复 1# xuezhonghuo

what's your match rule when get the two or more the same data in a file

...|27|27|0|
...|1413|1413|0|

xuezhonghuo

关阴月飞 发表于 2014-06-20 13:56
awk:
1）  从b里剔除a中有的行，生成一个文件other.unl    #awk 'FNR==NR{a[NR]=$0;next}!/a[FNR]/' a b  ...

还是不行，或者说，我只需要匹配a中第2个字段和b的第10个字段匹配，a中的第3个字段和b的第11个字段匹配，a的第4个字段和b的第12个字段匹配；这三个字段都匹配上的行，则输入到in中；匹配不上的，放入到other中

xuezhonghuo

expert1 发表于 2014-06-20 13:48
这 不是月经问题吗，grep似乎都能搞掂的。

grep不行吧？

关阴月飞

回复 6# xuezhonghuo


    你这完全是另一个需求了，等会有空再过来看看

li0924

回复 6# xuezhonghuo

1. 1）  从b里剔除a中有的行，生成一个文件other.unl    #awk 'FNR==NR{a[$2$3$4]=1;next}! a[$10$11$12]' a b >other.unl
   
2. 
   
3. 2）  从b里提取a中有的行，生成一个文件in.unl       #awk 'FNR==NR{a[$2$3$4]=1;next}a[$10$11$12]' a b >in.unl

复制代码

xuezhonghuo

rm -f in.unl other.unl
awk -F"|" '{
if(FILENAME=="a"){ARR[$0]=1}
if(FILENAME=="b")
{
   Str=$7"|"$10"|"$11"|"$12"|"$14"|"$25"|"$47"|"
   if(ARR[Str]==1){ print $0 >> "in.unl" } else { print $0 >> "other.unl" }
}
}' a b