请教一个数据合并计算的问题(又有新的麻烦了)

archangle

有大量（超过10万）的这样的数据
结构是一个ip和一个整数。这些ip有重复，现在想把属于同一个ip的后面的整数加起来，然后生成一份没有重复ip的数据。请问怎么实现比较效率高呢？用awk方便吗？或者有更简单的方法吗?

127.0.0.1  12
127.0.0.2  3
127.0.0.3  3
127.0.0.1 31
127.0.0.1 13
127.0.0.1 23

搭车再问一个和上面的例子有关问题：
现在的数据格式同上，但是每个ip只有1个或者2个记录。其实就是2个不同时间段的一个统计。现在想计算差值。我本想用mysql来实现。但是感觉杀鸡焉用牛刀。所以我想问问用awk怎么实现呢？我搞了版本没弄出来。
比如记录如下
127.0.0.1 12
127.0.0.1 18
我想得到的结果是6或者-6都行。

[ 本帖最后由 archangle 于 2006-10-23 18:10 编辑 ]

寂寞烈火

awk '{sum[$1]+=$2}END{for(i in sum)print i,sum[i]}'

archangle

perfect,多谢烈火兄了。

archangle

搭车再问一个和上面的例子有关问题：
现在的数据格式同上，但是每个ip只有1个或者2个记录。其实就是2个不同时间段的一个统计。现在想计算差值。我本想用mysql来实现。但是感觉杀鸡焉用牛刀。所以我想问问用awk怎么实现呢？我搞了版本没弄出来。
比如记录如下
127.0.0.1 12
127.0.0.1 18
我想得到的结果是6或者-6都行。

寂寞烈火

还是用牛刀吧~ ^_^

awk就是awp加ak

原帖由 寂寞烈火 于 2006-10-23 18:20 发表
还是用牛刀吧~ ^_^

我占位，等着看lovesaka兄来perl滴！

lovesaka

既然看到了那不来一个也不行

1. 
   
2. perl -e 'while(<>){@arry=split(/\s+/);$iphash{"$arry[0]"}=$arry[1]-$iphash{"$arry[0]"}};print $_,"\t",$iphash{"$_"},"\n" foreach(keys %iphash)' <1.txt
   

复制代码

archangle

[quote]
既然看到了那不来一个也不行
[/code]
多谢了！数据里如果某个ip只有一行，他会和0做比较吗？
我运行了一下，感觉是会。不知道是否真的会做比较呢？我正需用这个效果。

lovesaka

原帖由 archangle 于 2006-10-24 00:23 发表
[quote]
既然看到了那不来一个也不行
[/code]
多谢了！数据里如果某个ip只有一行，他会和0做比较吗？
我运行了一下，感觉是会。不知道是否真的会做比较呢？我正需用这个效果。

具体的说不会和0比较但每当出现一个没有记录过的IP后就减0一次也就是就每个不相同的IP第一次冒出来的时候会减零一次

guochunning

awk -F',' 'BEGIN{i=0}{a[i]=$1;b[i]=$2;for(m=0;m<i;m++)if(a[i]==a[m]){b[m]=b[i]-b[m];i--};i++}END{for(k=0;k<i;k++)print a[k],b[k]}'