免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 21907 | 回复: 12
打印 上一主题 下一主题

[文本处理] 文本顺序变了不影响处理结果 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2015-09-24 15:29 |只看该作者 |倒序浏览
例子:
source[baidu]@@id[123]@@ip[1.1.1.1]
ip[2.2.2.2]@@source[sogou]@@id[456]

结果为:
1.1.1.1 baidu 123
2.2.2.2 sogou 456

例子顺序不定,但是不影响结果的顺序

论坛徽章:
9
寅虎
日期:2013-12-02 12:49:22巨蟹座
日期:2014-07-18 18:13:34卯兔
日期:2014-07-25 14:43:08子鼠
日期:2014-07-26 10:10:51酉鸡
日期:2014-07-31 15:09:562015亚冠之本尤德科
日期:2015-05-19 09:27:382015亚冠之卡尔希纳萨夫
日期:2015-06-20 10:30:212015亚冠之阿尔纳斯尔
日期:2015-07-01 20:46:062015亚冠之城南
日期:2015-07-15 21:12:00
2 [报告]
发表于 2015-09-24 16:06 |只看该作者
  1. test@ubuntu:~/test$ cat test.txt
  2. source[baidu]@@id[123]@@ip[1.1.1.1]
  3. ip[2.2.2.2]@@source[sogou]@@id[456]
  4. test@ubuntu:~/test$ awk -F@@ '{for(i=1;i<=NF;i++){n=match($i,/\[.*\]/,a);b[substr($i,0,n-1)]=gensub(/[][]/,"","g",a[0])};print b["ip"],b["source"],b["id"]}' test.txt
  5. 1.1.1.1 baidu 123
  6. 2.2.2.2 sogou 456
复制代码

论坛徽章:
84
每日论坛发贴之星
日期:2015-12-29 06:20:00每日论坛发贴之星
日期:2016-01-16 06:20:00每周论坛发贴之星
日期:2016-01-17 22:22:00程序设计版块每日发帖之星
日期:2016-01-20 06:20:00每日论坛发贴之星
日期:2016-01-20 06:20:00程序设计版块每日发帖之星
日期:2016-01-21 06:20:00每日论坛发贴之星
日期:2016-01-21 06:20:00程序设计版块每日发帖之星
日期:2016-01-23 06:20:00程序设计版块每日发帖之星
日期:2016-01-31 06:20:00数据库技术版块每日发帖之星
日期:2016-01-16 06:20:00程序设计版块每日发帖之星
日期:2016-01-16 06:20:00程序设计版块每日发帖之星
日期:2016-01-14 06:20:00
3 [报告]
发表于 2015-09-24 16:12 |只看该作者
用字典:
  awk -F'[][@]+'  '{a[$1]=$2; a[$3]=$4; a[$5]=$6; print a["ip"], a["source"], a["id"];}'

论坛徽章:
20
卯兔
日期:2015-01-26 22:05:142015亚冠之萨济拖拉机
日期:2015-09-10 15:15:282015亚冠之阿尔希拉尔
日期:2015-09-25 17:37:53程序设计版块每日发帖之星
日期:2015-10-03 06:20:00程序设计版块每日发帖之星
日期:2015-12-09 06:20:00CU十四周年纪念徽章
日期:2015-12-17 09:07:15程序设计版块每日发帖之星
日期:2015-12-25 06:20:34程序设计版块每日发帖之星
日期:2015-12-25 06:20:34程序设计版块每日发帖之星
日期:2015-12-25 06:20:342015亚冠之广州富力
日期:2015-08-27 19:29:56每日论坛发贴之星
日期:2015-08-26 06:20:002015亚冠之阿尔希拉尔
日期:2015-05-18 17:26:27
4 [报告]
发表于 2015-09-24 16:17 |只看该作者
awk -F@@ 'BEGIN{t="ip;source;id";l=split(t,a,/;/)}{for(i=1;i<=NF;i++){split($i,b,/[][]/);c[b[1]]=b[2]}for(i=1;i<=l;i++)printf c[a[i]]" ";print ""}' file

论坛徽章:
84
每日论坛发贴之星
日期:2015-12-29 06:20:00每日论坛发贴之星
日期:2016-01-16 06:20:00每周论坛发贴之星
日期:2016-01-17 22:22:00程序设计版块每日发帖之星
日期:2016-01-20 06:20:00每日论坛发贴之星
日期:2016-01-20 06:20:00程序设计版块每日发帖之星
日期:2016-01-21 06:20:00每日论坛发贴之星
日期:2016-01-21 06:20:00程序设计版块每日发帖之星
日期:2016-01-23 06:20:00程序设计版块每日发帖之星
日期:2016-01-31 06:20:00数据库技术版块每日发帖之星
日期:2016-01-16 06:20:00程序设计版块每日发帖之星
日期:2016-01-16 06:20:00程序设计版块每日发帖之星
日期:2016-01-14 06:20:00
5 [报告]
发表于 2015-09-24 16:22 |只看该作者
bash 4 之后也支持 Associative arrays 了

declare -A a
while read e; do
    read  e1 e2 e3 e4 e5 e6 <<<"${e//[][@]/ }";
    a[$e1]=$e2; a[$e3]=$e4; a[$e5]=$e6;
    echo ${a[ip]} ${a[source]} ${a[id]};
done

论坛徽章:
84
每日论坛发贴之星
日期:2015-12-29 06:20:00每日论坛发贴之星
日期:2016-01-16 06:20:00每周论坛发贴之星
日期:2016-01-17 22:22:00程序设计版块每日发帖之星
日期:2016-01-20 06:20:00每日论坛发贴之星
日期:2016-01-20 06:20:00程序设计版块每日发帖之星
日期:2016-01-21 06:20:00每日论坛发贴之星
日期:2016-01-21 06:20:00程序设计版块每日发帖之星
日期:2016-01-23 06:20:00程序设计版块每日发帖之星
日期:2016-01-31 06:20:00数据库技术版块每日发帖之星
日期:2016-01-16 06:20:00程序设计版块每日发帖之星
日期:2016-01-16 06:20:00程序设计版块每日发帖之星
日期:2016-01-14 06:20:00
6 [报告]
发表于 2015-09-24 17:24 |只看该作者
看了2楼的答案,用for更好/通用一些:
    awk -F'[][@]+' '{for (i=1;i<NF;i+=2) { a[$i]=$(i+1); };  print a["ip"], a["source"], a["id"];}'

shell 版本改进:
    while read e; do
        ee=$(echo @@$e | sed -e 's/\]/ /g' -e 's/\[/]=/g' -e 's/@@/[/g');
        eval a=($ee);
        echo ${a[ip]} ${a[source]} ${a[id]};
    done

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
7 [报告]
发表于 2015-09-24 20:54 |只看该作者
回复 1# skypeleo

source[baidu]@@id[123]@@ip[1.1.1.1]
ip[2.2.2.2]@@source[sogou]@@id[456]

$ awk -F'@@' '{delete d;for(n=1;n<=NF;n++){split($n,a,"[][]");d[a[1]]=a[2]};print d["ip"],d["source"],d["id"]}' FILE
1.1.1.1 baidu 123
2.2.2.2 sogou 456
   

论坛徽章:
84
每日论坛发贴之星
日期:2015-12-29 06:20:00每日论坛发贴之星
日期:2016-01-16 06:20:00每周论坛发贴之星
日期:2016-01-17 22:22:00程序设计版块每日发帖之星
日期:2016-01-20 06:20:00每日论坛发贴之星
日期:2016-01-20 06:20:00程序设计版块每日发帖之星
日期:2016-01-21 06:20:00每日论坛发贴之星
日期:2016-01-21 06:20:00程序设计版块每日发帖之星
日期:2016-01-23 06:20:00程序设计版块每日发帖之星
日期:2016-01-31 06:20:00数据库技术版块每日发帖之星
日期:2016-01-16 06:20:00程序设计版块每日发帖之星
日期:2016-01-16 06:20:00程序设计版块每日发帖之星
日期:2016-01-14 06:20:00
8 [报告]
发表于 2015-09-24 21:46 |只看该作者
回复 7# jason680


-F 支持正则,可以直接这样:
    awk -F'[][@]+' '{for (i=1;i<NF;i+=2) { a[$i]=$(i+1); };  print a["ip"], a["source"], a["id"];}'

论坛徽章:
22
处女座
日期:2014-10-11 13:33:292015亚冠之塔什干火车头
日期:2015-07-20 19:59:042015亚冠之塔什干火车头
日期:2015-07-26 10:59:31程序设计版块每日发帖之星
日期:2015-08-05 06:20:00每日论坛发贴之星
日期:2015-08-05 06:20:00程序设计版块每日发帖之星
日期:2015-08-07 06:20:00每日论坛发贴之星
日期:2015-08-07 06:20:002015亚冠之阿尔纳斯尔
日期:2015-10-01 15:23:28白银圣斗士
日期:2015-12-07 17:17:06操作系统版块每日发帖之星
日期:2015-12-27 06:20:002015亚冠之广州富力
日期:2015-07-08 15:48:31程序设计版块每日发帖之星
日期:2015-06-11 22:20:00
9 [报告]
发表于 2015-09-24 22:01 |只看该作者
awk -F '[][]' '{gsub("@","",$0);for(i=1;i<=NF;i+=2)a[$i]=$(i+1);print a["ip"],a["source"],a["id"]}' file

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
10 [报告]
发表于 2015-09-25 06:24 |只看该作者
本帖最后由 jason680 于 2015-09-25 06:24 编辑

回复 8# yjh777

try this FILE

source[baidu]@@id[123]@@ip[1.1.1.1]
ip[2.2.2.2] @@source[sogou]@@id[456]

   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP