免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2413 | 回复: 6
打印 上一主题 下一主题

[文本处理] 怎么对 $@进行去重 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2014-05-25 17:16 |只看该作者 |倒序浏览
纯新手
例如 ./try.sh a b b a c
怎么对这个  a b b a c 进行去重啊

论坛徽章:
0
2 [报告]
发表于 2014-05-25 17:40 |只看该作者
echo $@ | awk '{for(i=0;i<NF;i++) {a[$i]++;if(a[$i]<=1) print $i}}' | sed 1d

我是这么做的 有什么简单的方法吗

论坛徽章:
2
狮子座
日期:2014-05-30 21:43:03巳蛇
日期:2014-05-30 21:46:14
3 [报告]
发表于 2014-05-25 18:02 |只看该作者
本帖最后由 tgwz88 于 2014-05-26 10:36 编辑
  1. for x in ` echo $@ ` ; do echo $x ;done | sort -u | tr '\n' ' '
复制代码

  1. echo $@ | tr ' ' '\n' | sort -u | xargs echo
复制代码

  1. tsort<<<$@ |  xargs echo
复制代码

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
4 [报告]
发表于 2014-05-25 18:15 |只看该作者
  1. echo "$@" | sed 's/ /\n/g' | sort -u
复制代码

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
5 [报告]
发表于 2014-05-25 19:07 |只看该作者
回复 1# genius04121
  1.     xargs -n1 <<<$@ |awk '!a[$1]++'
  2.     awk '{for(;i++<NF;)if(!a[$i]++)print $i}' <<<$@
  3.     xargs -n1 <<<$@  |sort -u
  4.     xargs -n1 <<<$@  |sort |uniq
复制代码

论坛徽章:
2
狮子座
日期:2014-05-30 21:43:03巳蛇
日期:2014-05-30 21:46:14
6 [报告]
发表于 2014-05-26 14:40 |只看该作者
本帖最后由 tgwz88 于 2014-05-27 11:27 编辑

  1. cat<<<$( tsort<<<$@)
复制代码

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
7 [报告]
发表于 2014-05-26 15:27 |只看该作者
本帖最后由 jason680 于 2014-05-26 15:28 编辑

回复 2# genius04121

echo $@ | awk '{for(n=1;n<=NF;n++)if(!a[$n]++)P=P" "$n;print P}'

echo $@ | awk '{for(n=1;n<=NF;n++)if(!a[$n]++)P=P==""?$n:P" "$n;print P}'

   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP