免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 程序设计 › Shell › [已解决]求助，如何删除特定位置出现重复字符的行
12
最近访问板块 发新帖
楼主: _伊飞_
打印 上一主题 下一主题

[文本处理] [已解决]求助，如何删除特定位置出现重复字符的行 [复制链接]

blackold

论坛徽章:
5
2015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:50:282015年亚洲杯之朝鲜 日期:2015-03-13 22:47:33IT运维版块每日发帖之星 日期:2016-01-09 06:20:00IT运维版块每周发帖之星 日期:2016-03-07 16:27:44
11楼 [报告]
发表于 2014-08-15 10:11 |只看该作者
回复 10# _伊飞_


    历史命令替换了。你用的是什么csh吧？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
blackold

论坛徽章:
5
2015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:50:282015年亚洲杯之朝鲜 日期:2015-03-13 22:47:33IT运维版块每日发帖之星 日期:2016-01-09 06:20:00IT运维版块每周发帖之星 日期:2016-03-07 16:27:44
12楼 [报告]
发表于 2014-08-15 10:14 |只看该作者
csh 类 shell:
  1. awk '\!a[substr($0,14,3),substr($0,24,3)]++' urfile
复制代码
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
_伊飞_

论坛徽章:
0
13楼 [报告]
发表于 2014-08-15 10:17 |只看该作者
回复 12# blackold


可以了！谢谢大虾，非常感谢！
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
_伊飞_

论坛徽章:
0
14楼 [报告]
发表于 2014-08-15 10:18 |只看该作者
问题解决，感谢以上诸位的帮忙 O(∩_∩)O~
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
blackold

论坛徽章:
5
2015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:50:282015年亚洲杯之朝鲜 日期:2015-03-13 22:47:33IT运维版块每日发帖之星 日期:2016-01-09 06:20:00IT运维版块每周发帖之星 日期:2016-03-07 16:27:44
15楼 [报告]
发表于 2014-08-15 10:28 |只看该作者
本帖最后由 blackold 于 2014-08-15 10:28 编辑

更方便、通用的写法
  1. awk '! a[substr($0,14,3),substr($0,24,3)]++' urfile
复制代码
csh 类 shell, bourne 类 shell, 通杀。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
_伊飞_

论坛徽章:
0
16楼 [报告]
发表于 2014-08-15 10:33 |只看该作者
回复 15# blackold


果然也可以，谢谢赐教
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
关阴月飞

论坛徽章:
39
辰龙 日期:2013-08-21 15:45:192015亚冠之广州富力 日期:2015-05-12 16:34:52亥猪 日期:2015-03-03 17:22:00申猴 日期:2015-03-03 17:21:37未羊 日期:2014-10-10 13:45:41戌狗 日期:2014-06-17 09:53:29巨蟹座 日期:2014-06-12 23:17:17双鱼座 日期:2014-06-10 12:42:44寅虎 日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫 日期:2015-05-24 15:24:35黄金圣斗士 日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林 日期:2017-06-24 16:43:52
17楼 [报告]
发表于 2014-08-15 10:43 |只看该作者
回复 4# _伊飞_


    你的系统环境是？ awk版本是？ 还有你是如何执行的？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
fxpbupt

论坛徽章:
1
双鱼座 日期:2014-08-25 19:13:11
18楼 [报告]
发表于 2014-08-15 10:44 |只看该作者
awk '(c=$0)&&NF==9{a=substr($3,1,3);$4=substr($3,4);$3=a;}!b[$3$6]++{print c}'  urfile
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
klainogn

论坛徽章:
5
白羊座 日期:2014-10-28 11:23:27水瓶座 日期:2015-01-20 10:19:022015亚冠之柏斯波利斯 日期:2015-07-11 18:17:2015-16赛季CBA联赛之同曦 日期:2015-12-23 12:38:582016猴年福章徽章 日期:2016-02-18 15:30:34
19楼 [报告]
发表于 2014-08-15 13:27 |只看该作者
  1. awk -vFIELDWIDTHS="13 3 8 3" '!a[$2,$4]++' urfile
复制代码
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
12
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP