免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 4655 | 回复: 10
打印 上一主题 下一主题

重复行只保留第一行 [复制链接]

论坛徽章:
1
15-16赛季CBA联赛之山东
日期:2016-05-13 00:06:39
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2016-05-12 19:48 |只看该作者 |倒序浏览
本帖最后由 _SHELL_ 于 2016-05-12 19:53 编辑

werwrtert
  ERROR*
ERROR*
ddffadfasf
sdfsfsfsfs
ERROR*
  ERROR*
ERROR*
end
ERROR*
dddd
ERROR

药这样的结果, 空白原样保留
=================
*werwrtert
  ERROR*
ddffadfasf
sdfsfsfsfs
ERROR*
end
ERROR*
dddd
ERROR*






论坛徽章:
307
程序设计版块每周发帖之星
日期:2016-04-08 00:41:33操作系统版块每日发帖之星
日期:2015-09-02 06:20:00每日论坛发贴之星
日期:2015-09-02 06:20:00程序设计版块每日发帖之星
日期:2015-09-04 06:20:00每日论坛发贴之星
日期:2015-09-04 06:20:00每周论坛发贴之星
日期:2015-09-06 22:22:00程序设计版块每日发帖之星
日期:2015-09-09 06:20:00程序设计版块每日发帖之星
日期:2015-09-19 06:20:00程序设计版块每日发帖之星
日期:2015-09-20 06:20:00每日论坛发贴之星
日期:2015-09-20 06:20:00程序设计版块每日发帖之星
日期:2015-09-22 06:20:00程序设计版块每日发帖之星
日期:2015-09-24 06:20:00
2 [报告]
发表于 2016-05-12 20:00 |只看该作者
回复 1# _SHELL_
有空白的在进行比较时, 是相等还是不等?

   

论坛徽章:
1
15-16赛季CBA联赛之山东
日期:2016-05-13 00:06:39
3 [报告]
发表于 2016-05-12 20:21 |只看该作者
比较时忽略空白 ,结果保留空白
回复 2# sunzhiguolu


   

论坛徽章:
307
程序设计版块每周发帖之星
日期:2016-04-08 00:41:33操作系统版块每日发帖之星
日期:2015-09-02 06:20:00每日论坛发贴之星
日期:2015-09-02 06:20:00程序设计版块每日发帖之星
日期:2015-09-04 06:20:00每日论坛发贴之星
日期:2015-09-04 06:20:00每周论坛发贴之星
日期:2015-09-06 22:22:00程序设计版块每日发帖之星
日期:2015-09-09 06:20:00程序设计版块每日发帖之星
日期:2015-09-19 06:20:00程序设计版块每日发帖之星
日期:2015-09-20 06:20:00每日论坛发贴之星
日期:2015-09-20 06:20:00程序设计版块每日发帖之星
日期:2015-09-22 06:20:00程序设计版块每日发帖之星
日期:2015-09-24 06:20:00
4 [报告]
发表于 2016-05-12 20:41 |只看该作者
本帖最后由 sunzhiguolu 于 2016-05-12 20:43 编辑

回复 3# _SHELL_
你试下,

  1. #!/usr/bin/perl
  2. use strict;
  3. use warnings;

  4. my $sLast = "";
  5. while (<DATA>){
  6.     my $sBareLine = s/\A\s+|\s+\z//gr;
  7.     if ($sLast ne $sBareLine){
  8.         print;
  9.     }
  10.     $sLast = $sBareLine;
  11. }

  12. __DATA__
  13. werwrtert
  14.   ERROR*
  15. ERROR*
  16. ddffadfasf
  17. sdfsfsfsfs
  18. ERROR*
  19.   ERROR*
  20. ERROR*
  21. end
  22. ERROR*
  23. dddd
  24. ERROR
复制代码
werwrtert
  ERROR*
ddffadfasf
sdfsfsfsfs
ERROR*
end
ERROR*
dddd
ERROR

论坛徽章:
307
程序设计版块每周发帖之星
日期:2016-04-08 00:41:33操作系统版块每日发帖之星
日期:2015-09-02 06:20:00每日论坛发贴之星
日期:2015-09-02 06:20:00程序设计版块每日发帖之星
日期:2015-09-04 06:20:00每日论坛发贴之星
日期:2015-09-04 06:20:00每周论坛发贴之星
日期:2015-09-06 22:22:00程序设计版块每日发帖之星
日期:2015-09-09 06:20:00程序设计版块每日发帖之星
日期:2015-09-19 06:20:00程序设计版块每日发帖之星
日期:2015-09-20 06:20:00每日论坛发贴之星
日期:2015-09-20 06:20:00程序设计版块每日发帖之星
日期:2015-09-22 06:20:00程序设计版块每日发帖之星
日期:2015-09-24 06:20:00
5 [报告]
发表于 2016-05-12 20:55 |只看该作者
  1. perl -nle '$b=s/\A\s+|\s+\z//gr;if($l ne $b){print}$l=$b' f
复制代码

论坛徽章:
1
15-16赛季CBA联赛之山东
日期:2016-05-13 00:06:39
6 [报告]
发表于 2016-05-12 22:19 |只看该作者
不好意思 弄错了 我是说 只想要后面的重复的行 如何破???
   谢谢啊
回复 5# sunzhiguolu


   

论坛徽章:
307
程序设计版块每周发帖之星
日期:2016-04-08 00:41:33操作系统版块每日发帖之星
日期:2015-09-02 06:20:00每日论坛发贴之星
日期:2015-09-02 06:20:00程序设计版块每日发帖之星
日期:2015-09-04 06:20:00每日论坛发贴之星
日期:2015-09-04 06:20:00每周论坛发贴之星
日期:2015-09-06 22:22:00程序设计版块每日发帖之星
日期:2015-09-09 06:20:00程序设计版块每日发帖之星
日期:2015-09-19 06:20:00程序设计版块每日发帖之星
日期:2015-09-20 06:20:00每日论坛发贴之星
日期:2015-09-20 06:20:00程序设计版块每日发帖之星
日期:2015-09-22 06:20:00程序设计版块每日发帖之星
日期:2015-09-24 06:20:00
7 [报告]
发表于 2016-05-12 22:41 |只看该作者
  1. #!/usr/bin/perl
  2. use strict;
  3. use warnings;

  4. my %hDump;
  5. while (<DATA>){
  6.     my $sBareLine = s/\A\s+|\s+\z//gr;
  7.     if (!%hDump){
  8.         $hDump{$sBareLine} = 1;
  9.         next;
  10.     }
  11.     if ($hDump{$sBareLine}){
  12.         print;
  13.         next;
  14.     }
  15.     %hDump = ();
  16.     $hDump{$sBareLine} = 1;
  17. }

  18. __DATA__
  19. werwrtert
  20.   ERROR*
  21. ERROR*
  22. ddffadfasf
  23. sdfsfsfsfs
  24. ERROR*
  25.   ERROR*
  26. ERROR*
  27. end
  28. ERROR*
  29. dddd
  30. ERROR
复制代码

论坛徽章:
6
15-16赛季CBA联赛之新疆
日期:2016-03-22 22:34:5915-16赛季CBA联赛之山东
日期:2016-04-11 09:08:41程序设计版块每日发帖之星
日期:2016-06-28 06:20:00程序设计版块每日发帖之星
日期:2016-07-19 06:20:00每日论坛发贴之星
日期:2016-07-19 06:20:0015-16赛季CBA联赛之青岛
日期:2016-07-20 22:44:17
8 [报告]
发表于 2016-05-12 22:57 |只看该作者
为啥ERROR*都留着?不算重复?

论坛徽章:
1
15-16赛季CBA联赛之山东
日期:2016-05-13 00:06:39
9 [报告]
发表于 2016-05-12 23:19 |只看该作者
回复 8# RE_HASH
就要 7喽的那样的结果,有简化一点的吗 好麻烦欧

   

论坛徽章:
6
15-16赛季CBA联赛之新疆
日期:2016-03-22 22:34:5915-16赛季CBA联赛之山东
日期:2016-04-11 09:08:41程序设计版块每日发帖之星
日期:2016-06-28 06:20:00程序设计版块每日发帖之星
日期:2016-07-19 06:20:00每日论坛发贴之星
日期:2016-07-19 06:20:0015-16赛季CBA联赛之青岛
日期:2016-07-20 22:44:17
10 [报告]
发表于 2016-05-12 23:38 |只看该作者
本帖最后由 RE_HASH 于 2016-05-13 00:08 编辑

*werwrtert
  ERROR*
ddffadfasf
sdfsfsfsfs
ERROR*
end
ERROR*
dddd
ERROR*

不懂你的逻辑,你要去重复的行,又要在结果里留重复的行,我彻底晕了

正常人思维:
去重复:cat vv|perl -ne 'print unless ($c->{$_}++)';
留重复:cat vv|perl -ne 'print if ($c->{$_}++)';
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP