免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 5833 | 回复: 15
打印 上一主题 下一主题

[文本处理] 收集 正则 方法提取汉字 awk sed 。。。 [复制链接]

论坛徽章:
2
金牛座
日期:2013-11-15 15:50:59巨蟹座
日期:2013-12-13 11:17:52
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2013-12-24 10:01 |只看该作者 |倒序浏览
  1. sug({q:"水泵",p:false,s:["水泵选型","水泵型号","水泵扬程","水泵接合器","水泵品牌","水泵价格","水泵厂家","水泵维修","水泵叶轮","水泵厂"]});
复制代码
需求
  1. 水泵
  2. 水泵选型
  3. 水泵型号
  4. 水泵扬程
  5. 水泵接合器
  6. 水泵品牌
  7. 水泵价格
  8. 水泵厂家
  9. 水泵维修
  10. 水泵叶轮
  11. 水泵厂
复制代码

论坛徽章:
5
未羊
日期:2014-08-04 16:15:21天秤座
日期:2014-08-13 13:52:372015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:112015亚冠之浦和红钻
日期:2015-06-29 15:30:48
2 [报告]
发表于 2013-12-24 10:21 |只看该作者
  1. grep -Po '(?<=")[^!-~]+'
复制代码

论坛徽章:
60
20周年集字徽章-20	
日期:2020-10-28 14:04:3015-16赛季CBA联赛之北京
日期:2016-07-06 15:42:0715-16赛季CBA联赛之同曦
日期:2016-06-12 10:38:0915-16赛季CBA联赛之佛山
日期:2016-05-27 11:54:56黄金圣斗士
日期:2015-12-02 11:44:35白银圣斗士
日期:2015-11-25 14:32:43白银圣斗士
日期:2015-11-23 12:53:352015亚冠之布里斯班狮吼
日期:2015-10-21 16:55:482015亚冠之首尔
日期:2015-09-01 16:46:052015亚冠之德黑兰石油
日期:2015-08-31 11:39:192015亚冠之萨济拖拉机
日期:2015-08-28 21:06:5315-16赛季CBA联赛之广东
日期:2016-07-12 14:58:53
3 [报告]
发表于 2013-12-24 10:26 |只看该作者
  1. grep -Po '[^a-zA-Z0-9{~!@#$%^&*()_+`;":<>,./?|}\\\[\]]+' file
复制代码
本方法,剔除不包含数字/字母/标点符号的东东,不保证完全准确.

论坛徽章:
0
4 [报告]
发表于 2013-12-24 10:38 |只看该作者
本帖最后由 风影刃 于 2013-12-24 10:38 编辑
  1. awk -vORS= '{for(i=1;i<=length($0);++i)if(substr($0,i,1)>"\177"){print substr($0,i,2);++i}else{printf("\n")}}' txt | sed '/^$/d'
复制代码

论坛徽章:
3
天蝎座
日期:2013-12-10 19:37:11酉鸡
日期:2014-08-04 20:05:38双鱼座
日期:2014-08-09 21:53:54
5 [报告]
发表于 2013-12-24 10:49 |只看该作者
  1. grep -o -P "[\x80-\xff]+" srcFile
复制代码
不知道是不是完全正确

论坛徽章:
2
金牛座
日期:2013-11-15 15:50:59巨蟹座
日期:2013-12-13 11:17:52
6
发表于 2013-12-24 11:26
goood。回复 3# reyleon


   

论坛徽章:
2
金牛座
日期:2013-11-15 15:50:59巨蟹座
日期:2013-12-13 11:17:52
7 [报告]
发表于 2013-12-24 11:27 |只看该作者
有复杂了 。回复 4# 风影刃


   

论坛徽章:
2
金牛座
日期:2013-11-15 15:50:59巨蟹座
日期:2013-12-13 11:17:52
8 [报告]
发表于 2013-12-24 11:29 |只看该作者
  1. [^!-~]+
复制代码
这个!-~+一直怎么理解,麻烦大神给个说明        回复 2# dn833


   

论坛徽章:
2
金牛座
日期:2013-11-15 15:50:59巨蟹座
日期:2013-12-13 11:17:52
9
发表于 2013-12-24 11:30
最笨的方法了回复 3# reyleon


   

论坛徽章:
5
未羊
日期:2014-08-04 16:15:21天秤座
日期:2014-08-13 13:52:372015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:112015亚冠之浦和红钻
日期:2015-06-29 15:30:48
10 [报告]
发表于 2013-12-24 11:39 |只看该作者
回复 8# 老狼000


    排除asc码表里边从第33个到第126个
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP