txt文本按条件筛选 并 排查

wadeheat2

有个txt文本

1. 我们
   
2. 大学很好
   
3. 长度很长吧
   
4. 大学很好
   
5. 学习啦

复制代码

要求：
1、长度少于两个汉字的删除，
2、数据排重

所以要得到：

1. 我们
   
2. 大学很好
   
3. 长度很长吧
   
4. 学习啦

复制代码

谢谢

runintostar

回复 1# wadeheat2
Try this:

1. awk 'length>1&&!a[$0]++'

复制代码

yestreenstars

1. awk '!a[$0]++&&length>1'

复制代码