去重复求助

56836430

有这样一组数据：
Pab_c10045_g1_i1_m.41        Pab_c36888_g1_i1_m.104245        91.379        58        4        1        96        153        239        183        7.86e-15        78.7
Pab_c10066_g2_i1_m.52        Pab_c10066_g2_i1_m.54        100.000        153        0        0        1        153        153        1        4.55e-76        283
Pab_c10066_g2_i1_m.54        Pab_c10066_g2_i1_m.52        100.000        153        0        0        1        153        153        1        1.29e-76        283
Pab_c10125_g1_i1_m.73        Pab_c10125_g1_i1_m.74        100.000        354        0        0        9        362        1        354        0.0        654
Pab_c10125_g1_i1_m.74        Pab_c10125_g1_i1_m.73        100.000        354        0        0        1        354        9        362        0.0        654
Pab_c10205_g1_i1_m.134        Pab_c10205_g1_i1_m.131        100.000        170        0        0        2        171        1        170        5.19e-86        315
Pab_c10205_g1_i1_m.131        Pab_c10205_g1_i1_m.134        100.000        170        0        0        1        170        2        171        2.00e-85        315

当某一行的第一列与另一行的第二列值相同，但该行第二列与另一行的第一列相同的行，只随机保留一行，即得到如下结果：
Pab_c10045_g1_i1_m.41        Pab_c36888_g1_i1_m.104245        91.379        58        4        1        96        153        239        183        7.86e-15        78.7
Pab_c10066_g2_i1_m.52        Pab_c10066_g2_i1_m.54        100.000        153        0        0        1        153        153        1        4.55e-76        283
Pab_c10125_g1_i1_m.73        Pab_c10125_g1_i1_m.74        100.000        354        0        0        9        362        1        354        0.0        654
Pab_c10205_g1_i1_m.134        Pab_c10205_g1_i1_m.131        100.000        170        0        0        2        171        1        170        5.19e-86        315

不知道有没有 简单的方法？谢谢各位大牛先！！

zxy877298415

回复 1# 56836430

1. awk '{t="";i=0;while(++i<3)a[i]=$i;for(i=1;i<=asort(a,b);i++) {t=b[i]" "t} }!c[t]++' file

复制代码

56836430

zxy877298415 发表于 2017-06-29 16:34
回复 1# 56836430

非常感谢！非常好用！

关阴月飞

是这个意思么？
awk '!a[$1$2]++ && !a[$2$1]++'   urfile

jason680

回复 1# 56836430

awk '!a[$1>$2?$1$22$1]++' FILE