免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 2758 | 回复: 10
打印 上一主题 下一主题

[文本处理] awk 取重复值 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2015-08-04 17:58 |只看该作者 |倒序浏览
本帖最后由 hgx126 于 2015-08-04 18:00 编辑

两文本:
a

  1. 李秀兰        a
  2. 王林珍        b
  3. 廖菊珍        c
复制代码
b

  1. 李秀兰        1        成功
  2. 李秀兰        2        帐户可用余额不足!
  3. 李秀兰        3        帐户可用余额不足!
  4. 王林珍        4        帐户可用余额不足!
  5. 吴超民        5        帐户可用余额不足!
  6. 廖菊珍        6        成功
  7. 廖菊珍        7        无此帐户
  8. 廖菊珍        8        帐号正确
  9. 廖菊珍        9        帐户可用余额不足!
  10. 蔡廷章        10        帐户可用余额不足!
  11. 蔡廷章        11        成功
复制代码
现要求以a文件第一列为准 对应b文件第一列,取第三列值,且b文件对应有几列值就取几列。结果如下:

  1. 李秀兰        成功
  2. 李秀兰        帐户可用余额不足!
  3. 李秀兰        帐户可用余额不足!
  4. 王林珍        帐户可用余额不足!
  5. 廖菊珍        成功
  6. 廖菊珍        无此帐户
  7. 廖菊珍        帐号正确
  8. 廖菊珍        帐户可用余额不足!
复制代码
求命令。

论坛徽章:
54
2015亚冠之德黑兰石油
日期:2015-07-07 13:00:1615-16赛季CBA联赛之深圳
日期:2016-03-31 09:03:5415-16赛季CBA联赛之辽宁
日期:2016-05-09 20:38:15程序设计版块每日发帖之星
日期:2016-05-12 06:20:0015-16赛季CBA联赛之四川
日期:2016-05-13 15:19:4715-16赛季CBA联赛之福建
日期:2016-05-15 20:24:34每日论坛发贴之星
日期:2016-05-16 06:20:0015-16赛季CBA联赛之吉林
日期:2016-05-26 11:49:4715-16赛季CBA联赛之广东
日期:2016-05-26 13:49:18极客徽章
日期:2016-12-07 14:05:2315-16赛季CBA联赛之广夏
日期:2016-12-20 17:33:532017金鸡报晓
日期:2017-01-10 15:19:56
2 [报告]
发表于 2015-08-04 18:01 |只看该作者
本帖最后由 haooooaaa 于 2015-08-04 19:11 编辑
  1. awk 'NR==FNR{a[$1];next}$1 in a{print $1,$NF}' a b
复制代码

论坛徽章:
60
20周年集字徽章-20	
日期:2020-10-28 14:04:3015-16赛季CBA联赛之北京
日期:2016-07-06 15:42:0715-16赛季CBA联赛之同曦
日期:2016-06-12 10:38:0915-16赛季CBA联赛之佛山
日期:2016-05-27 11:54:56黄金圣斗士
日期:2015-12-02 11:44:35白银圣斗士
日期:2015-11-25 14:32:43白银圣斗士
日期:2015-11-23 12:53:352015亚冠之布里斯班狮吼
日期:2015-10-21 16:55:482015亚冠之首尔
日期:2015-09-01 16:46:052015亚冠之德黑兰石油
日期:2015-08-31 11:39:192015亚冠之萨济拖拉机
日期:2015-08-28 21:06:5315-16赛季CBA联赛之广东
日期:2016-07-12 14:58:53
3 [报告]
发表于 2015-08-04 18:14 |只看该作者
回复 2# haooooaaa


    哦 no 要改下, 没看清题意

论坛徽章:
3
水瓶座
日期:2014-03-25 17:08:042015亚冠之塔什干棉农
日期:2015-08-10 10:45:122015亚冠之萨济拖拉机
日期:2015-08-13 16:05:24
4 [报告]
发表于 2015-08-04 19:03 |只看该作者
  1. [nick@Nick_OpenClient test]$ join -1 1 -2 1 11 12
  2. 李秀兰 a 1 成功
  3. 李秀兰 a 2 帐户可用余额不足!
  4. 李秀兰 a 3 帐户可用余额不足!
  5. 王林珍 b 4 帐户可用余额不足!
  6. 廖菊珍 c 6 成功
  7. 廖菊珍 c 7 无此帐户
  8. 廖菊珍 c 8 帐号正确
  9. 廖菊珍 c 9 帐户可用余额不足!
复制代码

评分

参与人数 1信誉积分 +10 收起 理由
substr函数 + 10 很给力!

查看全部评分

论坛徽章:
0
5 [报告]
发表于 2015-08-04 22:32 |只看该作者
awk 'NR==FNR{a[$1]=1}NR!=FNR{if($1 in a)print $1"\t"$3}'

论坛徽章:
22
处女座
日期:2014-10-11 13:33:292015亚冠之塔什干火车头
日期:2015-07-20 19:59:042015亚冠之塔什干火车头
日期:2015-07-26 10:59:31程序设计版块每日发帖之星
日期:2015-08-05 06:20:00每日论坛发贴之星
日期:2015-08-05 06:20:00程序设计版块每日发帖之星
日期:2015-08-07 06:20:00每日论坛发贴之星
日期:2015-08-07 06:20:002015亚冠之阿尔纳斯尔
日期:2015-10-01 15:23:28白银圣斗士
日期:2015-12-07 17:17:06操作系统版块每日发帖之星
日期:2015-12-27 06:20:002015亚冠之广州富力
日期:2015-07-08 15:48:31程序设计版块每日发帖之星
日期:2015-06-11 22:20:00
6 [报告]
发表于 2015-08-04 22:38 |只看该作者
awk 'NR==FNR{a[$1]=1}NR>FNR{if(a[$1])print $1,$3}' a b

论坛徽章:
22
处女座
日期:2014-10-11 13:33:292015亚冠之塔什干火车头
日期:2015-07-20 19:59:042015亚冠之塔什干火车头
日期:2015-07-26 10:59:31程序设计版块每日发帖之星
日期:2015-08-05 06:20:00每日论坛发贴之星
日期:2015-08-05 06:20:00程序设计版块每日发帖之星
日期:2015-08-07 06:20:00每日论坛发贴之星
日期:2015-08-07 06:20:002015亚冠之阿尔纳斯尔
日期:2015-10-01 15:23:28白银圣斗士
日期:2015-12-07 17:17:06操作系统版块每日发帖之星
日期:2015-12-27 06:20:002015亚冠之广州富力
日期:2015-07-08 15:48:31程序设计版块每日发帖之星
日期:2015-06-11 22:20:00
7 [报告]
发表于 2015-08-04 22:41 |只看该作者
cat a|while read a b;do awk '{if($1==v)print $1,$3}' v=$a b; done

论坛徽章:
22
处女座
日期:2014-10-11 13:33:292015亚冠之塔什干火车头
日期:2015-07-20 19:59:042015亚冠之塔什干火车头
日期:2015-07-26 10:59:31程序设计版块每日发帖之星
日期:2015-08-05 06:20:00每日论坛发贴之星
日期:2015-08-05 06:20:00程序设计版块每日发帖之星
日期:2015-08-07 06:20:00每日论坛发贴之星
日期:2015-08-07 06:20:002015亚冠之阿尔纳斯尔
日期:2015-10-01 15:23:28白银圣斗士
日期:2015-12-07 17:17:06操作系统版块每日发帖之星
日期:2015-12-27 06:20:002015亚冠之广州富力
日期:2015-07-08 15:48:31程序设计版块每日发帖之星
日期:2015-06-11 22:20:00
8 [报告]
发表于 2015-08-04 22:49 |只看该作者
回复 4# su8610
为啥我执行你的命令报错没有正确排序


   

论坛徽章:
22
处女座
日期:2014-10-11 13:33:292015亚冠之塔什干火车头
日期:2015-07-20 19:59:042015亚冠之塔什干火车头
日期:2015-07-26 10:59:31程序设计版块每日发帖之星
日期:2015-08-05 06:20:00每日论坛发贴之星
日期:2015-08-05 06:20:00程序设计版块每日发帖之星
日期:2015-08-07 06:20:00每日论坛发贴之星
日期:2015-08-07 06:20:002015亚冠之阿尔纳斯尔
日期:2015-10-01 15:23:28白银圣斗士
日期:2015-12-07 17:17:06操作系统版块每日发帖之星
日期:2015-12-27 06:20:002015亚冠之广州富力
日期:2015-07-08 15:48:31程序设计版块每日发帖之星
日期:2015-06-11 22:20:00
9 [报告]
发表于 2015-08-04 22:51 |只看该作者
回复 4# su8610
join -1 1 -2 1 <(sort file) <(sort file1)


   

论坛徽章:
20
卯兔
日期:2015-01-26 22:05:142015亚冠之萨济拖拉机
日期:2015-09-10 15:15:282015亚冠之阿尔希拉尔
日期:2015-09-25 17:37:53程序设计版块每日发帖之星
日期:2015-10-03 06:20:00程序设计版块每日发帖之星
日期:2015-12-09 06:20:00CU十四周年纪念徽章
日期:2015-12-17 09:07:15程序设计版块每日发帖之星
日期:2015-12-25 06:20:34程序设计版块每日发帖之星
日期:2015-12-25 06:20:34程序设计版块每日发帖之星
日期:2015-12-25 06:20:342015亚冠之广州富力
日期:2015-08-27 19:29:56每日论坛发贴之星
日期:2015-08-26 06:20:002015亚冠之阿尔希拉尔
日期:2015-05-18 17:26:27
10 [报告]
发表于 2015-08-05 09:18 |只看该作者
回复 1# hgx126
  1. awk 'FNR==NR{a[$1]=1;next}a[$1]{print $1,$3}' a b
  2. awk 'ARGIND==1{a[$1]=1;next}a[$1]{print $1,$3}' a b
复制代码
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP