怎么提取一列中不重复的行

whjw6

假如有个文件，有2列，用tab或空格分开
要提取第2列中不重复的行

例如有个文件 file.txt

1    王三
2    张五
3    王三
4    李六

提取结果应该为

王三
张五
李六

用shell实现

ivhb

awk '{print $2}' < urfile | sort -u

angeljyt

#/bin/sh
awk 'print $2' file.txt|uniq

[ 本帖最后由 angeljyt 于 2007-11-4 21:15 编辑 ]

springwind426

awk '!a[$2]++{print $2}' 文件

springwind426

用bash的

1. 
   
2. #!/bin/bash
   
3. s=$'\n'
   
4. while read null str
   
5. do
   
6.         [ "$s" == "${s/ $str}" ] && echo $str && s="$s $str"
   
7. done
   

复制代码

rdcwayx

原帖由 angeljyt 于 2007-11-4 21:13 发表
#/bin/sh
awk 'print $2' file.txt|uniq

不sort，而直接用uniq是没有用的。

blackold

$ cut -d" " -f2 urfile | sort -u
文件以空格为分隔符，输出结果与原来的顺序不同：
李六
王三
张五

$ sort -k2,2 -u urfile | sort -k1,1 | cut -d" " -f2
输出结果保持原来的顺序：
王三
张五
李六

[ 本帖最后由 blackold 于 2007-11-5 09:32 编辑 ]

gswwgph

awk '{print $2}' urfile | sort -u

[ 本帖最后由 gswwgph 于 2007-11-5 10:02 编辑 ]

gswwgph

我刚回复的是错误的

angeljyt

谢谢(xièxiè)。我(wo)是(shì)新手(xīnshǒu)