采用Shell对相邻的相同序列去重的问题

junhengwoo

我所说的相邻的相同序列，是指文件相邻的两个行块是相同的。
下面的a和a是相同的，需要去掉一个a。
a
a

下面的a、b组成的块相邻且相同，需要去掉重复的一个，只剩下a、b。
a
b
a
b

下面的a、b、c组成的块相邻且相同，需要去掉重复的一个，只剩下a、b、c。
a
b
c
a
b
c

假设文件中有以下的内容：
a
b
a
b
c
c
a
b
我希望得到的输出结果是：
a
b
c
a
b

请各位大神帮忙指导下，实现方式越简单越好。先谢谢啦

Windows19

回复 1# junhengwoo


    这个合需求不

1. sort 文件 | uniq
   

复制代码

haooooaaa

1. awk 'a~$0{b=b?b"\n"$0:$0;if(b==a){print a;a=b=""}next}{a=a?a"\n"$0:$0}END{printf a?a:""}' file
   
2. a
   
3. b
   
4. c
   
5. a
   
6. b

复制代码

songyc_2015

回复 1# junhengwoo

1. sed -nr ':1;N;$!b1;${:2;s#(([^\n]+\n)+)\1#\1#;t2;p}' file
   
2. a
   
3. b
   
4. c
   
5. a
   
6. b

复制代码