Chinaunix

标题: txt文本按条件筛选 并 排查 [打印本页]

---

作者: wadeheat2    时间: 2014-02-26 12:23
标题: txt文本按条件筛选 并 排查


有个txt文本

1. 我们
   
2. 大学很好
   
3. 长度很长吧
   
4. 大学很好
   
5. 学习啦

复制代码

要求：
1、长度少于两个汉字的删除，
2、数据排重

所以要得到：

1. 我们
   
2. 大学很好
   
3. 长度很长吧
   
4. 学习啦

复制代码

谢谢

---

作者: runintostar    时间: 2014-02-26 12:26
回复 1# wadeheat2
Try this:

1. awk 'length>1&&!a[$0]++'

复制代码

---

作者: yestreenstars    时间: 2014-02-26 13:14

1. awk '!a[$0]++&&length>1'

复制代码

---

欢迎光临 Chinaunix (http://bbs.chinaunix.net/)

Powered by Discuz! X3.2