免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12345下一页
最近访问板块 发新帖
查看: 5294 | 回复: 45
打印 上一主题 下一主题

[文本处理] 提取处理日志文件,求大神指点 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2014-07-29 09:46 |只看该作者 |倒序浏览
本帖最后由 andyahua 于 2014-07-29 10:04 编辑

shell小白来虚心来请教,关键是不怎么好描述搜索方法。自己看了awk,sed,cut还是没解决。等大神的指点,谢谢了

部分日志文件
...
File(s) list:
/root/Documents/123//fff53e576f7241de1d93672962f7bea4  matched
        File Name:         fff53e576f7241de1d93672962f7bea4
        File Info:         aaa
        File ID:         34632
        Unscannable: false
/root/Documents/123//fff5953927389d18729b4ed6b2d248e6  unmatched
        File Name:         fff5953927389d18729b4ed6b2d248e6
        File Info:         bbb
        File ID:         37815
        Unscannable: false
/root/Documents/123//fff27dfe35219a2f7ab157fec9a6da40  unmatched
        File Name:         fff27dfe35219a2f7ab157fec9a6da40
        File Info:         ccc
        File ID:         25464
        Unscannable: false
/root/Documents/123//fffc6448d62c7ccd18acbbab21431f47  matched
        File Name:         fffc6448d62c7ccd18acbbab21431f47
        File Info:         ddd
        File ID:         25464
        Unscannable: false
...

我想处理得到的结果是找到matched对应的信息,把File Name和对应File Info分别写到新文件中的第一列和第二列,中间用制表符分开。待处理的日志文件中冒号:后面有制表符也有空格。
fff53e576f7241de1d93672962f7bea4        aaa
fffc6448d62c7ccd18acbbab21431f47        ddd
...

论坛徽章:
60
20周年集字徽章-20	
日期:2020-10-28 14:04:3015-16赛季CBA联赛之北京
日期:2016-07-06 15:42:0715-16赛季CBA联赛之同曦
日期:2016-06-12 10:38:0915-16赛季CBA联赛之佛山
日期:2016-05-27 11:54:56黄金圣斗士
日期:2015-12-02 11:44:35白银圣斗士
日期:2015-11-25 14:32:43白银圣斗士
日期:2015-11-23 12:53:352015亚冠之布里斯班狮吼
日期:2015-10-21 16:55:482015亚冠之首尔
日期:2015-09-01 16:46:052015亚冠之德黑兰石油
日期:2015-08-31 11:39:192015亚冠之萨济拖拉机
日期:2015-08-28 21:06:5315-16赛季CBA联赛之广东
日期:2016-07-12 14:58:53
2 [报告]
发表于 2014-07-29 09:53 |只看该作者
贴出来吧, 没人会从你的图片中扣数据出来给你处理

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
3 [报告]
发表于 2014-07-29 09:59 |只看该作者
本帖最后由 yestreenstars 于 2014-07-29 09:59 编辑

目测一下:
  1. awk '/File Name/{printf $NF"\t";getline;print $NF}'
复制代码

论坛徽章:
0
4 [报告]
发表于 2014-07-29 10:00 |只看该作者
回复 2# reyleon
谢谢

    部分日志文件
...
File(s) list:
/root/Documents/123//fff53e576f7241de1d93672962f7bea4  matched
        File Name:         fff53e576f7241de1d93672962f7bea4
        File Info:         aaa
        File ID:         34632
        Unscannable: false
/root/Documents/123//fff5953927389d18729b4ed6b2d248e6  unmatched
        File Name:         fff5953927389d18729b4ed6b2d248e6
        File Info:         bbb
        File ID:         37815
        Unscannable: false
/root/Documents/123//fff27dfe35219a2f7ab157fec9a6da40  unmatched
        File Name:         fff27dfe35219a2f7ab157fec9a6da40
        File Info:         ccc
        File ID:         25464
        Unscannable: false
/root/Documents/123//fffc6448d62c7ccd18acbbab21431f47  matched
        File Name:         fffc6448d62c7ccd18acbbab21431f47
        File Info:         ddd
        File ID:         25464
        Unscannable: false
...

我想处理得到的结果是找到matched对应的信息,把File Name和对应File Info分别写到新文件中的第一列和第二列,中间用制表符分开。冒号:后面有制表符也有空格。
fff53e576f7241de1d93672962f7bea4        aaa
fffc6448d62c7ccd18acbbab21431f47        ddd
...

论坛徽章:
71
15-16赛季CBA联赛之同曦
日期:2018-08-23 15:41:42辰龙
日期:2014-08-15 09:07:43狮子座
日期:2014-06-03 13:55:33亥猪
日期:2014-06-02 11:17:08巨蟹座
日期:2014-05-06 10:02:03午马
日期:2014-05-04 08:18:27亥猪
日期:2014-04-29 11:11:32技术图书徽章
日期:2014-04-24 15:51:26技术图书徽章
日期:2014-04-17 11:01:53辰龙
日期:2014-04-15 12:45:46亥猪
日期:2014-04-11 09:06:23射手座
日期:2014-04-01 15:28:10
5 [报告]
发表于 2014-07-29 10:06 |只看该作者
回复 3# yestreenstars


    符合matched的??

论坛徽章:
0
6 [报告]
发表于 2014-07-29 10:07 |只看该作者
回复 3# yestreenstars


    谢谢大神的指点,求带

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
7 [报告]
发表于 2014-07-29 10:09 |只看该作者
回复 6# andyahua

只带妹纸,不带汉纸~
   

论坛徽章:
71
15-16赛季CBA联赛之同曦
日期:2018-08-23 15:41:42辰龙
日期:2014-08-15 09:07:43狮子座
日期:2014-06-03 13:55:33亥猪
日期:2014-06-02 11:17:08巨蟹座
日期:2014-05-06 10:02:03午马
日期:2014-05-04 08:18:27亥猪
日期:2014-04-29 11:11:32技术图书徽章
日期:2014-04-24 15:51:26技术图书徽章
日期:2014-04-17 11:01:53辰龙
日期:2014-04-15 12:45:46亥猪
日期:2014-04-11 09:06:23射手座
日期:2014-04-01 15:28:10
8 [报告]
发表于 2014-07-29 10:11 |只看该作者
本帖最后由 zhaopingzi 于 2014-07-29 11:21 编辑

  1. awk '$2=="matched"{getline;printf $NF"\t";getline;print $NF}'  urfile
  2. fff53e576f7241de1d93672962f7bea4        aaa
  3. fffc6448d62c7ccd18acbbab21431f47        ddd

复制代码

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
9 [报告]
发表于 2014-07-29 10:13 |只看该作者
回复 5# zhaopingzi

噢,我没注意到还有这个条件~
   

论坛徽章:
0
10 [报告]
发表于 2014-07-29 10:14 |只看该作者
回复 3# yestreenstars


    结果还是有点小问题,File Info对应的信息如果有空格,只能打印空格后面的内容。如aaa bbb,结果只显示bbb。
    在线等{:3_193:}
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP