免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 程序设计 › Shell › 给个区分大小写的去重复

最近访问板块

发新帖

查看: 1967 | 回复: 6

上一主题

下一主题

[文本处理] 给个区分大小写的去重复 [复制链接]

论坛徽章:: 0

电梯直达

跳转到指定楼层

1楼 [收藏(0)] [报告]

发表于 2017-05-29 16:51 |只看该作者 |倒序浏览

突然发现重大问题，去重时，忽略大小写
aiaibinan
AIAIBINAN
aiaibingao
AIAIBINGAO
aiaibinge
AIAIBINGE

要求：上面的数据去重复时全部输出

给个，区分大小写的去重复的代码

区分大小写

文库|博客

论坛徽章:: 20

程序设计版块每日发帖之星
日期:2015-10-11 06:20:00

15-16赛季CBA联赛之山东
日期:2016-05-28 18:18:56

15-16赛季CBA联赛之新疆
日期:2017-04-12 22:55:47

15-16赛季CBA联赛之青岛
日期:2017-06-26 18:30:03

15-16赛季CBA联赛之四川
日期:2017-09-04 12:27:03

15-16赛季CBA联赛之福建
日期:2018-02-09 14:28:33

15-16赛季CBA联赛之同曦
日期:2018-04-17 12:43:34

15-16赛季CBA联赛之浙江
日期:2018-07-14 13:27:40

15-16赛季CBA联赛之吉林
日期:2018-09-13 15:48:29

15-16赛季CBA联赛之新疆
日期:2016-05-07 05:05:32

15-16赛季CBA联赛之八一
日期:2016-03-14 12:32:06

程序设计版块每日发帖之星
日期:2015-12-12 06:20:00

2楼 [报告]

发表于 2017-05-29 17:37 |只看该作者

awk '!a[$0]++'

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

3楼 [报告]

发表于 2017-05-29 17:44 |只看该作者

回复 2# baby_神

这个忽略大小写的，不行

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 54

2015亚冠之德黑兰石油
日期:2015-07-07 13:00:16

15-16赛季CBA联赛之深圳
日期:2016-03-31 09:03:54

15-16赛季CBA联赛之辽宁
日期:2016-05-09 20:38:15

程序设计版块每日发帖之星
日期:2016-05-12 06:20:00

15-16赛季CBA联赛之四川
日期:2016-05-13 15:19:47

15-16赛季CBA联赛之福建
日期:2016-05-15 20:24:34

每日论坛发贴之星
日期:2016-05-16 06:20:00

15-16赛季CBA联赛之吉林
日期:2016-05-26 11:49:47

15-16赛季CBA联赛之广东
日期:2016-05-26 13:49:18

极客徽章
日期:2016-12-07 14:05:23

15-16赛季CBA联赛之广夏
日期:2016-12-20 17:33:53

2017金鸡报晓
日期:2017-01-10 15:19:56

4楼 [报告]

发表于 2017-05-29 20:56 |只看该作者

awk '!a[tolower($0)]++'

复制代码

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

5楼 [报告]

发表于 2017-05-30 06:49 |只看该作者

本帖最后由 rtzd 于 2017-05-30 06:54 编辑

回复 2# baby_神

我的数据复杂，自己给弄错了，却始终找不到原因
你的正确

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

6楼 [报告]

发表于 2017-05-30 06:52 |只看该作者

回复 4# haooooaaa

跟你学了一招，好

只是搞不明白，为什么 awk '!a[toupper($0)]++' 输出和你的一样的结果

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 1

程序设计版块每日发帖之星
日期:2015-12-17 06:20:00

7楼 [报告]

发表于 2017-05-31 09:52 |只看该作者

sort -u ufile

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

发新帖

Chinaunix › 论坛 › 程序设计 › Shell › 给个区分大小写的去重复

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP