如何删除文本中第一列内容相同行，请朋友帮忙!

bbsnx

23216000003|6634489980130246727|董浩然|20080326|200803|1553.14|1239.33|313.81|0|70901.14|1239.33|0|0|
23216000003|6634489980130246870|董浩然|20080326|200803|2000.00|1239.33|313.81|0|70901.14|1239.33|0|0|
23216000007|6634489980130250190|王晓萍|20080326|200803|559.31|381.74|177.57|0|40439.07|381.74|0|0|
23216000011|6634499980100872526|许维才|20080326|200803|744.39|663.49|80.90|0|19687.99|663.49|0|0|
23216000014|6639129980130046023|郭宪伟|20080326|200803|707.40|628.03|79.37|0|19340.25|628.03|0|0|
23216000015|6635439980130063633|许明泉|20080326|200803|678.15|536.45|141.70|0|32037.91|536.45|0|0|
23216000016|6639159980100299431|杨耀红|20080326|200803|640.15|314.14|326.01|0|74630.12|314.14|0|0|
23216000016|6639159980100299780|杨耀红|20080326|200803|640.15|314.14|326.01|0|74630.12|314.14|0|0|
23216000017|6631419980130077156|秦冬堂|20080326|200803|1117.31|988.02|129.29|0|31538.89|988.02|0|0|
23216000018|6634499980130030012|夏兆媛|20080326|200803|558.66|494.01|64.65|0|15769.51|494.01|0|0|
23216000019|6634499980100883283|于建芳|20080326|200803|1372.91|920.90|452.01|0|102988.52|920.90|0|0|
23216000020|6630489980130021128|白福堂|20080326|200803|1064.27|713.88|350.39|0|79836.13|713.88|0|0|
将上述文本中第一列内容相同行删除

waker

awk -F'[|]' '!a[$1]++' urfile

davistar

1. 
   
2. awk -F\| '{b[$1]=$0;if(++a[$1]>1)delete b[$1]}END{for(i in b)print b[i]}'
   

复制代码

jinl

原帖由 waker 于 2008-3-26 15:51 发表
awk -F'[|]' '!a[$1]++' urfile

这个只能删除掉重复行第二次以后出现的情况，如果要把所有重复行都删掉，是不满足要求的

nuclearxin

原帖由 jinl 于 2008-3-26 16:16 发表

这个只能删除掉重复行第二次以后出现的情况，如果要把所有重复行都删掉，是不满足要求的

据我所知 是用来显示$1第一次出现的内容

liujuejun

原帖由 waker 于 2008-3-26 15:51 发表
awk -F'[|]' '!a[$1]++' urfile

这个好使,我刚刚用来发工资了

beauty2003

原帖由 liujuejun 于 2008-3-26 21:08 发表


这个好使,我刚刚用来发工资了

呵呵,知识就是力量啊.

hh9net

这个!代表什么？是非？

liujuejun

原帖由 beauty2003 于 2008-3-26 22:57 发表


呵呵,知识就是力量啊.

像批量开户就不能有重复的人员,楼主是也是银行的吧

无声无息

原帖由 liujuejun 于 2008-3-27 11:35 发表




像批量开户就不能有重复的人员,楼主是也是银行的吧

难道$7表示钱？？