请教一个文件处理的问题，grep根25和70有没有啥关系？

Edengundam

原帖由 dlms 于 2007-5-23 10:13 发表

我觉得我描述的很清除啊，主要是文件太大了是个日志怎么帖呢。

我感慨昨天...

dlms

原帖由 Edengundam 于 2007-5-23 10:20 发表



我感慨昨天...

ivhb

原帖由 dlms 于 2007-5-23 06:58 发表
问题是我将近300多个文件，统计出来的结果不是70就25，我晕了。
这个是交易日志，不可能的啊

看你的程序，就是$1, 那么，你的300个文件，不用循环，怎么处理的？
我的意思是，你出来的70这个数，实际上是最后一个文件的统计数？

woodie

你的疑惑：grep是否有次数限制？
答案：没有。
斑竹已经告诉你grep -f的方法，所以换掉你的n个grep吧。有时候冗长的机械劳动让人疲惫，容易出些低级错误，不必再深究了，浪费别人也浪费自己的宝贵时间。^_^

Edengundam

cardno.file 是进行匹配的帐号文件, 一个帐号一行, 注意最后一行请留一个空行.
条件过滤在# check filter condition注释下面一行, 可以根据情况调整.
data那里, 可以支持多个文件.
返回结果为ok: cardno或者failed: cardno.
根据你情况怎么玩都可以了.

1. 
   
2. #!/bin/sh
   
3. 
   
4. awk 'BEGIN {
   
5. RS = "-+\n";
   
6. FS = "\n";
   
7. while (getline < "cardno.file")
   
8.         card_hash[$0] = "true";
   
9. }
   
10. {
    
11.     for (i = 1; i <= NF; i++)
    
12.         {
    
13.                 if (split($i, tmp, ":|：") == 2)
    
14.                 {
    
15.                         hash[tmp[1]] = tmp[2];
    
16.                 }
    
17. 
    
18.         }
    
19.         # check filter condition
    
20.         if (hash["cardno"] in card_hash && hash["stat"] == "success" && hash["tx
    
21. kind"] == "取款")
    
22.                 printf("ok:%s\n", hash["cardno"]);
    
23.         else
    
24.                 printf("failed:%s\n", hash["cardno"]);
    
25. }
    
26. ' data
    
27. 
    

复制代码

dlms

原帖由 woodie 于 2007-5-23 10:56 发表
你的疑惑：grep是否有次数限制？
答案：没有。
斑竹已经告诉你grep -f的方法，所以换掉你的n个grep吧。有时候冗长的机械劳动让人疲惫，容易出些低级错误，不必再深究了，浪费别人也浪费自己的宝贵时间。^_^

我换掉了没有问题，我就是不明白为啥都敲出来会根直接用文件查不一样呢?
我在测试下，谢谢提醒。呵呵

dlms

原帖由 Edengundam 于 2007-5-23 10:57 发表
cardno.file 是进行匹配的帐号文件, 一个帐号一行, 注意最后一行请留一个空行.
条件过滤在# check filter condition注释下面一行, 可以根据情况调整.
data那里, 可以支持多个文件.
返回结果为ok: cardno或者fa ...

佩服:em11:

Edengundam

原帖由 dlms 于 2007-5-23 11:02 发表

佩服:em11:

先测结果, 我只能根据你数据文件中2条, 构造一部分测试例子^^
原来数据文件中一个小空格字符都会引起错误, 但是解决办法就是干掉首尾空白字符, 我觉得也不是很难. ^^

welcome008

说一下我的思路：
awk 'BEGIN{FS="\n";RS="--------";OFS="|"}{if ( $0 ~ /stat:SUCCESS/ && $0 ~ /txkind:取款/ ) print $4' filename1>tmp
大致这样，取出需要统计的字段，这里是使用第四个即cardno：xxxxxx字段。
然后再把tmp和测试帐号文件一起联合使用awk进行统计。
因为不知道你要统计的具体内容，故没有写出来。

[ 本帖最后由 welcome008 于 2007-5-23 14:16 编辑 ]

awk就是awp加ak

try。。貌似需要 gawk

1. 
   
2. awk '
   
3. function getFieldValue(pField, i){
   
4.        
   
5.         for (i = 1; i < NF; i++) if ($i == pField) return $(i+1);
   
6.         return 0;
   
7. }
   
8. 
   
9. function initCardTable(){
   
10.         while ((getline < "cards.dat") > 0) specialCards[$0]++;
    
11. }
    
12. 
    
13. BEGIN {
    
14.         RS="\n--*"; ORS="\n-------"; FS="[:\n]";
    
15. }
    
16. 
    
17. {
    
18.         specialCards[123456]++;
    
19. 
    
20.         if (getFieldValue("stat") == "success" &&
    
21.                 getFieldValue("txkind") == "取款" &&
    
22.                 specialCards[getFieldValue("cardno")]) print;
    
23. }' urfile

复制代码