免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 3497 | 回复: 12
打印 上一主题 下一主题

[文本处理] 求助,文本处理需求 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2013-12-08 16:37 |只看该作者 |倒序浏览
文本内容如下: 具体需求是处理群发的账号,(from同一样账号,to不同的账号,subject=qunfa 一样的匹配出来)

from=<root@localhost.localdomain> to=<root@localhost.localdomain>[2] rcpttype=to subject=Logwatch
from=<> to=<root@localhost.localdomain>[2] rcpttype=to subject=系统退信/Mail
from=<jishu@test.com> to=<xiaoli@test.com>[2] subject=qunfa state=sent
from=<jishu@test.com> to=<xcm--1rx0thpkmnhf@test.com>[3] subject=qunfa state=ignore
from=<jishu@test.com> to=<xcm--1rx0thpe0nhf@test.com>[4] subject=qunfa state=ignore
from=<jishu@test.com> to=<linux@test.com>[5] subject=qunfa state=sent
from=<jishu@test.com> to=<jishu@test.com>[6] subject=qunfa state=sent
from=<jishu@test.com> to=<xcm--1rx0thp1z2hf@test.com>[7] subject=qunfa state=ignore
from=<jishu@test.com> to=<xcm--1rx0thpni2hf@test.com>[8] subject=qunfa state=ignore
from=<jishu@test.com> to=<aa@test.com>[9] subject=qunfa state=sent
from=<jishu@test.com> to=<xiaohua@test.com>[10] subject=qunfa state=sent
from=<jishu@test.com> to=<baoxiao@test.com>[11] subject=qunfa state=sent
from=<jishu@test.com> to=<yunwei@test.com>[12] subject=qunfa state=sent
from=<jishu@test.com> to=<java@test.com>[13] subject=qunfa state=sent
from=<jishu@test.com> to=<kaifa@test.com>[14] subject=qunfa state=sent
from=<jishu@test.com> to=<12345678@qq.com>[2] rcpttype=to subject=qqyouxiang
from=<> to=<jishu@test.com>[2] subject=系统退信/Mail Delivery

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
2 [报告]
发表于 2013-12-08 16:50 |只看该作者
目测:
  1. [root@localhost ~]# awk '{a[$1$3]=a[$1$3]?a[$1$3] RS $0:$0;b[$1$3]++}END{for(i in a)if(b[i]>1)print a[i]}' i
  2. from=<jishu@test.com> to=<xiaoli@test.com>[2] subject=qunfa state=sent
  3. from=<jishu@test.com> to=<xcm--1rx0thpkmnhf@test.com>[3] subject=qunfa state=ignore
  4. from=<jishu@test.com> to=<xcm--1rx0thpe0nhf@test.com>[4] subject=qunfa state=ignore
  5. from=<jishu@test.com> to=<linux@test.com>[5] subject=qunfa state=sent
  6. from=<jishu@test.com> to=<jishu@test.com>[6] subject=qunfa state=sent
  7. from=<jishu@test.com> to=<xcm--1rx0thp1z2hf@test.com>[7] subject=qunfa state=ignore
  8. from=<jishu@test.com> to=<xcm--1rx0thpni2hf@test.com>[8] subject=qunfa state=ignore
  9. from=<jishu@test.com> to=<aa@test.com>[9] subject=qunfa state=sent
  10. from=<jishu@test.com> to=<xiaohua@test.com>[10] subject=qunfa state=sent
  11. from=<jishu@test.com> to=<baoxiao@test.com>[11] subject=qunfa state=sent
  12. from=<jishu@test.com> to=<yunwei@test.com>[12] subject=qunfa state=sent
  13. from=<jishu@test.com> to=<java@test.com>[13] subject=qunfa state=sent
  14. from=<jishu@test.com> to=<kaifa@test.com>[14] subject=qunfa state=sent
  15. [root@localhost ~]#
复制代码

论坛徽章:
0
3 [报告]
发表于 2013-12-08 16:57 |只看该作者
就是这个意思,谢谢帮忙 小弟愚钝,有点看不懂,呵呵回复 2# yestreenstars


   

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
4 [报告]
发表于 2013-12-08 17:19 |只看该作者
回复 3# zimuyunren
等你有基础之后再回头来看就会发现其实很简单~

   

论坛徽章:
769
金牛座
日期:2014-02-26 17:49:58水瓶座
日期:2014-02-26 18:10:15白羊座
日期:2014-04-15 19:29:52寅虎
日期:2014-04-17 19:43:21酉鸡
日期:2014-04-19 21:24:10子鼠
日期:2014-04-22 13:55:24卯兔
日期:2014-04-22 14:20:58亥猪
日期:2014-04-22 16:13:09狮子座
日期:2014-05-05 22:31:17摩羯座
日期:2014-05-06 10:32:53处女座
日期:2014-05-12 09:23:11子鼠
日期:2014-05-21 18:21:27
5 [报告]
发表于 2013-12-09 10:18 |只看该作者
回复 4# yestreenstars
按照个人的理解是,把from和subject相同的行存入数组a中,若这样的行超过1次,
判断为群发邮件,不同的群发行以RS分隔。

   

论坛徽章:
36
摩羯座
日期:2013-09-23 16:37:312015年亚洲杯之沙特阿拉伯
日期:2015-04-14 09:10:172015亚冠之柏太阳神
日期:2015-06-25 08:48:212015亚冠之武里南联
日期:2015-07-28 09:01:082015亚冠之莱赫维亚
日期:2015-07-28 15:44:172015亚冠之柏斯波利斯
日期:2015-09-06 14:08:52白银圣斗士
日期:2015-11-25 17:06:2815-16赛季CBA联赛之吉林
日期:2015-12-09 16:59:072016猴年福章徽章
日期:2016-02-18 15:30:3415-16赛季CBA联赛之辽宁
日期:2016-04-14 09:29:04luobin
日期:2016-06-17 17:46:3615-16赛季CBA联赛之天津
日期:2016-08-16 14:11:01
6 [报告]
发表于 2013-12-09 16:50 |只看该作者
回复 2# yestreenstars
我这么写 awk -F '[><]' '/subject=qunfa/&&a[$2]++&&!b[$4]++' 为什么from=<jishu@test.com> to=<xiaoli@test.com>[2] subject=qunfa state=sent这条记录打印不出来?请高手指点下

   

论坛徽章:
36
摩羯座
日期:2013-09-23 16:37:312015年亚洲杯之沙特阿拉伯
日期:2015-04-14 09:10:172015亚冠之柏太阳神
日期:2015-06-25 08:48:212015亚冠之武里南联
日期:2015-07-28 09:01:082015亚冠之莱赫维亚
日期:2015-07-28 15:44:172015亚冠之柏斯波利斯
日期:2015-09-06 14:08:52白银圣斗士
日期:2015-11-25 17:06:2815-16赛季CBA联赛之吉林
日期:2015-12-09 16:59:072016猴年福章徽章
日期:2016-02-18 15:30:3415-16赛季CBA联赛之辽宁
日期:2016-04-14 09:29:04luobin
日期:2016-06-17 17:46:3615-16赛季CBA联赛之天津
日期:2016-08-16 14:11:01
7 [报告]
发表于 2013-12-09 16:53 |只看该作者
回复 2# yestreenstars
大神我用
from=<root@localhost.localdomain> to=<root@localhost.localdomain>[2] rcpttype=to subject=Logwatch
from=<root@localhost.localdomain> to=<root@localhost.localdomain>[16] rcpttype=to subject=系统退信/Mail
这样的文件 你的代码也把它输出来了!

   

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
8 [报告]
发表于 2013-12-09 16:53 |只看该作者
回复 6# LikeLx
因为处理这行时a[$2]++为假~

   

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
9 [报告]
发表于 2013-12-09 17:05 |只看该作者
回复 7# LikeLx
改成这样了:
  1. awk '{s=gensub(/.*(subject=[^ ]*).*/,"\\1",1);t=$1""s;a[t]=a[t]?a[t] RS $0:$0;b[t]++}END{for(i in a)if(b[i]>1)print a[i]}'
复制代码

论坛徽章:
36
摩羯座
日期:2013-09-23 16:37:312015年亚洲杯之沙特阿拉伯
日期:2015-04-14 09:10:172015亚冠之柏太阳神
日期:2015-06-25 08:48:212015亚冠之武里南联
日期:2015-07-28 09:01:082015亚冠之莱赫维亚
日期:2015-07-28 15:44:172015亚冠之柏斯波利斯
日期:2015-09-06 14:08:52白银圣斗士
日期:2015-11-25 17:06:2815-16赛季CBA联赛之吉林
日期:2015-12-09 16:59:072016猴年福章徽章
日期:2016-02-18 15:30:3415-16赛季CBA联赛之辽宁
日期:2016-04-14 09:29:04luobin
日期:2016-06-17 17:46:3615-16赛季CBA联赛之天津
日期:2016-08-16 14:11:01
10 [报告]
发表于 2013-12-09 17:19 |只看该作者
回复 9# yestreenstars

这个OK
   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP