shell去重复问题

sundful

有个文件1.txt

1. 88383$232
   
2. 32323$888
   
3. 22323$736
   
4. 88383$222
   
5. 83738$112
   
6. 22323$212
   

复制代码

以“$”分割，想根据$分割以后取重复，只要$1一样，就只留下一个，以上的结果为

1. 88383$232
   
2. 32323$888
   
3. 22323$736
   
4. 83738$112

复制代码

不知道咋搞呀，请大家帮帮忙！~

ziyunfei

so easy


awk -F$ '!a[$1]++' file

cjaizss

so easy


awk -F$ '!a[$1]++' file
ziyunfei 发表于 2011-10-24 14:52

    可能LZ是新手,这样看不适合新手理解.
awk  'BEGIN{FS="$"}!($1 in flag){print;flag[$1]=1;}' file
可能好理解一些

sundful

谢谢楼上两位老大！~！

cjaizss

谢谢楼上两位老大！~！
sundful 发表于 2011-10-24 15:23

    不谢,不过我还是想讲一讲,建议还是学习一下awk

fangtong2008

回复 3# cjaizss


    晕 这么写更不好理解了

cjaizss

回复  cjaizss


    晕 这么写更不好理解了
fangtong2008 发表于 2011-10-24 15:49

    晕啊,那
awk  'BEGIN{FS="$"}{if($1 in flag){}else{print;flag[$1]=1;}}' file

Shell_HAT

1. use strict;
   
2. use warnings;
   
3. my %data;
   
4. open (STDIN, "1.txt");
   
5. while (<STDIN>)
   
6. {
   
7.     chomp;
   
8.     my $row = $_;
   
9.     s/\$.*//;
   
10.     $data{$_} = $row;
    
11. }
    
12. foreach (keys %data)
    
13. {
    
14.     print "$data{$_}\n";
    
15. }

复制代码