awk 文件处理

littleboys

a.file 内容如下：

TX_ID       EOSE_NUM   SEN      ARRIVAL_TS                     TX_TYPE  TX_SUBTYPE STATUS SUCCESS_TYPE                  
----------- ---------- -------- ------------------------------ -------- ---------- ------ ------------------------------
   10234959 Q89212     34GL     2011-12-09-12.02.07.520000     EOSE     EOSE-GEN   U      2011-12-09-12.02.07.520000   
   10234960 Q89212     34GL     2011-12-09-12.02.07.520000     EOSE     EOSE-GEN   U      2011-12-09-12.02.07.520000   
   10234961 Q89212     34GL     2011-12-09-12.02.07.520000     EOSE     ORD-SHIP   S      2011-12-09-12.02.07.520000   
   10234962 Q89212     34GL     2011-12-09-12.02.07.520000     EOSE     ORD-SHIP   U      2011-12-09-12.02.07.520000   
   10234963 Q89212     34GL     2011-12-09-12.02.07.520000     EOSE     ORD-SHIP   S      2011-12-09-12.02.07.520000   
   10234964 Q89212     34GL     2011-12-09-12.02.07.520000     EOSE     EOSE-GEN   D      2011-12-09-12.02.07.520000   
   10234965 Q89212     34GL     2011-12-09-12.02.07.520000     EOSE     EOSE-GEN   F      2011-12-09-12.02.07.520000   
   10234965 Q89212     34GL     2011-12-09-12.02.07.520000     EOSE     EOSE-GEN   S      2011-12-09-12.02.07.520000   

  8 record(s) selected.

需要用 awk 做如下处理：

if ((status = 'U' || status = 'S') && (tx_subtype= 'EOSE-GEN')) || ((status = 'S') && (tx_subtype= 'ORD-SHIP'))
    then: do nothing
Else:
     print the whole line
END

这是一个数据库输出的内容，status 字段对应的内容如果是 'U' 或者's' 而且 tx_subtype 内容 是 EOSE-GEN
                                    或者status 字段对应的内容如果是 's' 而且 tx_subtype 内容 是 ORD-SHIP
   就不输出这一行

否则
      输出整行内容。

本人对 awk 不是很熟悉，正在寻找方法处理，可能比较麻烦一些，寻求帮助，谢谢。

seesea2517

回复 1# littleboys


    其实就是语法问题吧：

1. awk '{if (($7== "U" || $7== "S") && ($6== "EOSE-GEN")) || (($7== "S") && ($6== "ORD-SHIP")) {next;} else {print;}; }' a.file

复制代码

未测试。

littleboys

我也写了一个方法

我也写了一个shell 脚本
#!/bin/awk -f
{
    if((($7=="U" || $7=="S") && ($6=="EOSE-GEN")) || (($7=="S") && ($6=="ORD-SHIP"))){
        # do nothing
    }else{
        printf $0"\r\n"
    }
}

测试通过了，正在测试特例， 谢谢楼上

littleboys

如果 a.file 内容里面的字段的数据是空值的时候，处理有些问题


TX_ID       EOSE_NUM   SEN      ARRIVAL_TS                     TX_TYPE  TX_SUBTYPE STATUS SUCCESS_TYPE                  
----------- ---------- -------- ------------------------------ -------- ---------- ------ ------------------------------
   10234959 Q89212     34GL     2011-12-09-12.02.07.520000     EOSE     EOSE-GEN   U      2011-12-09-12.02.07.520000   
   10234960 Q89212     34GL     2011-12-09-12.02.07.520000     EOSE     EOSE-GEN   U      2011-12-09-12.02.07.520000   
   10234961 Q89212              2011-12-09-12.02.07.520000     EOSE     ORD-SHIP   S      2011-12-09-12.02.07.520000   
   10234962 Q89212              2011-12-09-12.02.07.520000     EOSE     ORD-SHIP   U      2011-12-09-12.02.07.520000   
   10234963 Q89212              2011-12-09-12.02.07.520000     EOSE     ORD-SHIP   S      2011-12-09-12.02.07.520000   
   10234964 Q89212              2011-12-09-12.02.07.520000     EOSE     EOSE-GEN   D      2011-12-09-12.02.07.520000   
   10234965 Q89212              2011-12-09-12.02.07.520000     EOSE     EOSE-GEN   F      2011-12-09-12.02.07.520000   
   10234965 Q89212     -        2011-12-09-12.02.07.520000     EOSE     EOSE-GEN   S      -                             

  8 record(s) selected.

例子中SEN 字段的值是空值的时候， $6 和 $7 不是所要的字段

yestreenstars

回复 3# littleboys

没必要用那么多小括号

1. awk '{if($7~/^[US]$/&&$6=="EOSE-GEN"||$7=="S"&&$6=="ORD-SHIP")next;else print}'

复制代码

yestreenstars

回复 4# littleboys

如果最后一个字段一定不为空的话，可以用$(NF-1)代替$7，用$(NF-2)代替$6
   

littleboys

回复 6# yestreenstars

这个应该没有问题了，谢谢~~


   

q1208c

我很好奇, 为啥不在数据库里直接完成这个工作? 非要拿出来再搞一次? 为了兴趣么?

seesea2517

回复 4# littleboys


    嗯，有字段为空是个特例。如果你的分隔符是一个TAB的话，直接设置awk的 FS 就可以了。不知道是不是因为你粘贴复制的原因在描述里是空格，不过看上去格式是整齐的，如果是这样也可以通过设置awk的域宽来达到效果。当然啦，现在已经解决了就好了。

littleboys

回复 9# seesea2517
awk的域宽 还真不知道是多少，也需要计算 ----- 的长度才能知道，有时间学习一下。