awk判断如果第一列和第二列的值完全相同则取第三列的最大值

921129732

现有一个文件名为1.txt，内容如下：

dawn_v3 android_app_category cid=6/dt=2018-11-27                                                                                          
dawn_v3 android_app_category cid=6/dt=2018-11-28
dawn_v3 stat_active p=0/cid=5/dt=2018-08-04
dawn_v3 stat_active p=0/cid=5/dt=2018-08-05
dawn_v3 stat_enhanced_event_split_cid5 dt=2018-01-28/event_name=public_templates_1_purchase_0
dawn_v3 stat_enhanced_event_split_cid5 dt=2018-01-29/event_name=public_templates_1_purchase_0
dawn_v3 stat_enhanced_event_split_cid5 dt=2018-01-30/event_name=public_templates_1_purchase_0
dawn_v3 stat_enhanced_event_split_cid5 dt=2018-01-28/event_name=public_templates_1_purchase_1
dawn_v3 stat_enhanced_event_split_cid5 dt=2018-01-29/event_name=public_templates_1_purchase_1
dawn_v3 stat_enhanced_event_split_cid5 dt=2018-01-30/event_name=public_templates_1_purchase_1
dawn_v3 stat_enhanced_event_split_cid5 dt=2018-01-28/event_name=public_templates_1_purchase_show
dawn_v3 stat_enhanced_event_split_cid5 dt=2018-01-29/event_name=public_templates_1_purchase_show
dawn_v3 stat_enhanced_event_split_cid5 dt=2018-01-30/event_name=public_templates_1_purchase_show
wps_vas_db wps_zt_vip_act_user_reward_split dt=2018-12-29
wps_vas_db wps_zt_vip_act_user_reward_split dt=2018-12-30
wps_vas_db wps_zt_vip_act_user_reward_split dt=2018-12-31



想比较每行非dt字段如果完全相同则取dt的日期最大值那一行的数据，期望得到的结果如下：
dawn_v3  android_app_category  cid=6/dt=2018-11-28
dawn_v3  stat_active  p=0/cid=5/dt=2018-08-05
dawn_v3  stat_enhanced_event_split_cid5  dt=2018-01-30/event_name=public_templates_1_purchase_0
dawn_v3  stat_enhanced_event_split_cid5  dt=2018-01-30/event_name=public_templates_1_purchase_1
dawn_v3  stat_enhanced_event_split_cid5  dt=2018-01-30/event_name=public_templates_1_purchase_show
wps_vas_db  wps_zt_vip_act_user_reward_split  dt=2018-12-31

请各位大神不吝赐教，感谢！

农民伯伯丶

描述得不是太清楚，应该说上下两行的第一列、第二列的值如果相同，就取第二行的值（时间已经排好序了），我理解的结果是这样的

1. awk '{if(a1==$1 && a2==$2 ) { a1=$1;a2=$2;a3=$3;a4=$4} else { print a1,a2,a3,a4; a1=$1;a2=$2;a3=$3;a4=$4;}}END{print a1,a2,a3,a4}' a.txt

复制代码

921129732

回复 2# 农民伯伯丶

感谢！描述的不是很清楚，想取到的结果就是非dt字段都相同的话就取dt最大值的那一行数据

wh7211

回复 1# 921129732

1. awk '{match($3,"(.*dt=)([^/]*)(.*)",a);b=$1$2a[1]a[3];if(c[b]<a[2]){c[b]=a[2];d[b]=NR"|"$0}}END{PROCINFO["sorted_in"]="@val_num_asc";for(i in d){sub(/^.*\|/,"",d[i]);print d[i]}}' 1.txt

复制代码

zxy877298415

回复 1# 921129732

1. awk '{match($0,"dt=([^/]+)",a);p=gensub("dt[^/]+","","",$0);if(b[p]<a[1]) {e[p]=$0};if(!d[p]++) {c[++s]=p}}END{for(i=1;i<=s;i++) print e[c[i]]}' file

复制代码

921129732

回复 4# wh7211

太感谢了！

921129732

回复 5# zxy877298415

感谢感谢！另有一个不明白的地方想请教下，p=gensub("dt[^/]+","","",$0);if(b[p]<a[1]这里多了一个,""是做什么用的呢？我试了一下去掉一个""之后就会执行的慢一些...