免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 2922 | 回复: 13
打印 上一主题 下一主题

[文本处理] 提取指定行并排序 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2016-12-18 08:21 |只看该作者 |倒序浏览

有没有办法,把大写字母、小写字母、大小写字母混搭,只要横向排序一样的(2行及以上),就把它提取出来,并把一样的排序在一起?
(最好能引深到,里面若有数字及符号时,只要横向排序一样,就提取出来)
文档:
a
A
abc
ABC
abC
AbC
adgyc
ADGYC
adGYc
hj
uyt
UDW

输出最终结果并排序:
a
A
abc
ABC
abC
AbC
adgyc
ADGYC
adGYc





论坛徽章:
54
2015亚冠之德黑兰石油
日期:2015-07-07 13:00:1615-16赛季CBA联赛之深圳
日期:2016-03-31 09:03:5415-16赛季CBA联赛之辽宁
日期:2016-05-09 20:38:15程序设计版块每日发帖之星
日期:2016-05-12 06:20:0015-16赛季CBA联赛之四川
日期:2016-05-13 15:19:4715-16赛季CBA联赛之福建
日期:2016-05-15 20:24:34每日论坛发贴之星
日期:2016-05-16 06:20:0015-16赛季CBA联赛之吉林
日期:2016-05-26 11:49:4715-16赛季CBA联赛之广东
日期:2016-05-26 13:49:18极客徽章
日期:2016-12-07 14:05:2315-16赛季CBA联赛之广夏
日期:2016-12-20 17:33:532017金鸡报晓
日期:2017-01-10 15:19:56
2 [报告]
发表于 2016-12-18 09:22 |只看该作者
  1. awk 'NR==FNR{a[tolower($0)]++;next}a[tolower($0)]>1' file file
复制代码

论坛徽章:
6
摩羯座
日期:2013-08-24 10:43:10狮子座
日期:2013-08-25 10:27:06天秤座
日期:2013-09-11 20:28:44午马
日期:2014-09-28 16:06:0015-16赛季CBA联赛之八一
日期:2016-12-19 13:55:0515-16赛季CBA联赛之天津
日期:2016-12-20 14:01:23
3 [报告]
发表于 2016-12-18 10:58 |只看该作者
  1. sort -f filex | uniq -iD
复制代码

论坛徽章:
0
4 [报告]
发表于 2016-12-18 11:21 |只看该作者
回复 2# haooooaaa

论坛徽章:
0
5 [报告]
发表于 2016-12-18 11:22 |只看该作者
回复 3# cao627

论坛徽章:
0
6 [报告]
发表于 2016-12-18 11:45 |只看该作者
回复 2# haooooaaa


帮看看好吗?

2.jpg (9.92 KB, 下载次数: 43)

2.jpg

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
7 [报告]
发表于 2016-12-18 12:22 |只看该作者
回复 1# rtzd

$ awk '{k=toupper($0);a[k]=a[k]$0"\n";}END{t=asorti(a,b);for(n=1;n<=t;++n)printf a[b[n]]}' FILE
a
A
abc
ABC
abC
AbC
adgyc
ADGYC
adGYc
hj
UDW
uyt

论坛徽章:
0
8 [报告]
发表于 2016-12-18 12:36 |只看该作者
回复 7# jason680





三块肉
只可惜,文档中只有一次出现过的行,也给统计进去了。上面说过排序只出现2次及以上

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
9 [报告]
发表于 2016-12-18 12:49 |只看该作者
本帖最后由 jason680 于 2016-12-18 14:13 编辑

回复 8# rtzd

>> ...把大写字母、小写字母、大小写字母混搭
>> ...上面说过排序出现2次及以上

$ awk '{k=toupper($0);a[k]=a[k]$0"\n";c[k]++}END{t=asorti(a,b);for(n=1;n<=t;++n)if(c[b[n]]>1)printf a[b[n]]}' FILE
a
A
abc
ABC
abC
AbC
adgyc
ADGYC
adGYc

论坛徽章:
0
10 [报告]
发表于 2016-12-18 13:01 |只看该作者
回复 9# jason680


三块肉+



您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP