重提问题：awk 某域是否满足某文件的正则匹配

errmood

假设有一过滤文本 filter.txt 内容为过滤规则的正则表达式或某特定词
cat filter.txt
^\/*.js$
*.jpg$
adtest

样本数据 a.dat 为某段日志
cat a.dat
59.39.253.253 /scripts/js/createAjaxObject.js "aaa"
117.44.45.132 /main/login.do "bbb"
117.68.36.136 /html/3230.html "ccc"
117.44.45.132 /user.jsp "ddd"
222.185.4.1 /logo.jpg "eee"
222.138.185.69 /adtest.shtml "fff"


希望根据filter.txt的过滤规则（也就是说filter.txt可维护，增加规则仅需要增加新正则即可）
将 a.dat 中$2不满足过滤规则的行打印出来

也就是说 希望得到如下数据
117.44.45.132 /main/login.do "bbb"
117.68.36.136 /html/3230.html "ccc"
117.44.45.132 /user.jsp "ddd"

我已经拜读了论坛中关于awk的精采文章，但仍没解决如上问题，请指教，谢谢了！

errmood

或者不局限于华丽的awk，意在解决问题，也许是思路僵化进死胡同了。

xwmhmily

LZ的意思是得到以117.44.45.132 开头的数据吗?
如下可得:

cat a.dat | sed -n '/^117.44.45.132 /p'

cat a.dat | awk '/^117.44.45.132 /{ print $0 }'

cat a.dat | grep '^117.44.45.132 '

[ 本帖最后由 xwmhmily 于 2008-7-23 00:21 编辑 ]

walkerxk

原帖由 xwmhmily 于 2008-7-23 00:19 发表
LZ的意思是得到以117.44.45.132 开头的数据吗?
如下可得:

cat a.dat | sed -n '/^117.44.45.132 /p'

cat a.dat | awk '/^117.44.45.132 /{ print $0 }'

cat a.dat | grep '^117.44.45.132 '

看清楚题目再回答。

__lxmxn__

have a try

1. grep -vf filter a.dat

复制代码

errmood

原帖由 __lxmxn__ 于 2008-7-23 00:37 发表
have a try
grep -vf filter a.dat

这个当然是可以的，但如果第三列包含了需要被过滤的内容呢？
我只想过滤第二列，第三列保持原样 ：）

crowsy001

while read line
do
     info=`echo "$line" | awk '{print $2}' | grep -vf filter`

done < a.dat

crowsy001

上帖，点错键了。 见谅。

没有测试；刚学shell。

errmood

原帖由 crowsy001 于 2008-7-23 00:51 发表
while read line
do
     info=`echo "$line" | awk '{print $2}' | grep -vf filter`

done < a.dat

这样做会把$1和$3丢掉的

welcome008

其实有个变通的方法：

使用awk的-f选项

然后把你的规则文件里写成awk脚本
类似：

{
if (
$2 ! ~/正则表达式/  &&
$2 ! ~/正则表达式/  &&
...
$2 ! ~/正则表达式/  )
print $0
}

具体不记得了