忘记密码   免费注册 查看新帖 |

ChinaUnix.net

  平台 论坛 博客 文库 频道自动化运维 虚拟化 储存备份 C/C++ PHP MySQL 嵌入式 Linux系统
最近访问板块 发新帖
查看: 1141 | 回复: 9

[文本处理] 每列增加一个key [复制链接]

论坛徽章:
0
发表于 2018-04-11 10:02 |显示全部楼层
有一个文本你数据 cat file
male,25,mark,2018-04-11T14:03:04.880187
female,20,cici,2018-04-11T09:50:50.963284
我想把每行变成
sex:male,age:25,name:mark,time:14:03:04
sex:female,age:20,name:cici,time:09:50:50
这个应该如何写?

论坛徽章:
130
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
发表于 2018-04-11 10:11 |显示全部楼层
回复 1# wjw870907

$ awk 'BEGIN{FS=OFS=",";split("male,age,name,time",a,",")}{for(n=1;n<=NF;n+=1)$n=a[n]":"$n;print}' file
male:male,age:25,name:mark,time:2018-04-11T14:03:04.880187
male:female,age:20,name:cici,time:2018-04-11T09:50:50.963284

$ awk 'BEGIN{FS=OFS=",";split("male,age,name,time",a,",")}{gsub(".+T|[.].*","",$NF);for(n=1;n<=NF;n+=1)$n=a[n]":"$n;print}' file
male:male,age:25,name:mark,time:14:03:04
male:female,age:20,name:cici,time:09:50:50

$ cat file
male,25,mark,2018-04-11T14:03:04.880187
female,20,cici,2018-04-11T09:50:50.963284

论坛徽章:
0
发表于 2018-04-11 11:03 |显示全部楼层
回复 2# jason680

谢谢大神,文本错了,实际数据是male 25 mark 2018-04-11T14:03:04.880187,ww022: 22 ---root---crontab -e
我实际需要的只前面4列,还有最后两列,出来的结果数据
{"sex":"male","age":"25","name":"mark","time":"14:03:04","user":"root","content":"contab -e"}

论坛徽章:
19
程序设计版块每日发帖之星
日期:2016-05-03 06:20:0015-16赛季CBA联赛之山西
日期:2018-08-07 19:46:2315-16赛季CBA联赛之佛山
日期:2018-08-03 13:19:33黑曼巴
日期:2018-07-06 15:19:5015-16赛季CBA联赛之八一
日期:2018-07-05 10:34:0915-16赛季CBA联赛之八一
日期:2018-07-03 16:56:4615-16赛季CBA联赛之深圳
日期:2018-06-15 14:59:3715-16赛季CBA联赛之青岛
日期:2018-06-08 13:45:2815-16赛季CBA联赛之同曦
日期:2018-06-04 19:42:2015-16赛季CBA联赛之山东
日期:2018-05-30 12:44:59CU十四周年纪念徽章
日期:2018-05-15 11:36:3815-16赛季CBA联赛之广东
日期:2018-05-14 09:52:42
发表于 2018-04-11 14:03 |显示全部楼层
本帖最后由 wh7211 于 2018-04-11 14:05 编辑

回复 3# wjw870907


实际数据是male 25 mark 2018-04-11T14:03:04.880187,ww022: 22 ---root---crontab -e
我实际需要的只前面4列,还有最后两列,出来的结果数据
{"sex":"male","age":"25","name":"mark","time":"14:03:04","user":"root","content":"contab -e"}
  1. cat 1
  2. male 25 mark 2018-04-11T14:03:04.880187,ww022: 22 ---root---crontab -e
  3. female 20 cici 2018-04-11T09:50:50.963284,ww022: 22 ---root---crontab -e

  4. awk '{split($0,t,"[ T.-]+");print "{\042sex\042:\042"t[1]"\042,\042age\042:\042"t[2]"\042,\042name\042:\042"t[3]"\042,\042time\042:\042"t[7]"\042,\042user\042:\042"t[10]"\042,\042content\042:\042"t[11]" -"t[12]"\042}"}' 1
  5. {"sex":"male","age":"25","name":"mark","time":"14:03:04","user":"root","content":"crontab -e"}
  6. {"sex":"female","age":"20","name":"cici","time":"09:50:50","user":"root","content":"crontab -e"}
复制代码

论坛徽章:
0
发表于 2018-04-11 15:25 |显示全部楼层
回复 4# wh7211

最后的content我如果有多个-怎么解决,比如mysql -uroot -p123456 这样就不好控制了能否直接把---分割的最后列都输出出来

论坛徽章:
19
程序设计版块每日发帖之星
日期:2016-05-03 06:20:0015-16赛季CBA联赛之山西
日期:2018-08-07 19:46:2315-16赛季CBA联赛之佛山
日期:2018-08-03 13:19:33黑曼巴
日期:2018-07-06 15:19:5015-16赛季CBA联赛之八一
日期:2018-07-05 10:34:0915-16赛季CBA联赛之八一
日期:2018-07-03 16:56:4615-16赛季CBA联赛之深圳
日期:2018-06-15 14:59:3715-16赛季CBA联赛之青岛
日期:2018-06-08 13:45:2815-16赛季CBA联赛之同曦
日期:2018-06-04 19:42:2015-16赛季CBA联赛之山东
日期:2018-05-30 12:44:59CU十四周年纪念徽章
日期:2018-05-15 11:36:3815-16赛季CBA联赛之广东
日期:2018-05-14 09:52:42
发表于 2018-04-11 15:48 |显示全部楼层
回复 5# wjw870907


  1. cat 1
  2. male 25 mark 2018-04-11T14:03:04.880187,ww022: 22 ---root---crontab -e
  3. female 20 cici 2018-04-11T09:50:50.963284,ww022: 22 ---root---mysql -uroot -p123456

  4. awk '{l=split($0,t,"[ T.]|---");for(i=10;i<=l;i++){a=a?a" "t[i]:t[i]};print "{\042sex\042:\042"t[1]"\042,\042age\042:\042"t[2]"\042,\042name\042:\042"t[3]"\042,\042time\042:\042"t[5]"\042,\042user\042:\042"t[9]"\042,\042content\042:\042"a"\042}";a=""}' 1
  5. {"sex":"male","age":"25","name":"mark","time":"14:03:04","user":"root","content":"crontab -e"}
  6. {"sex":"female","age":"20","name":"cici","time":"09:50:50","user":"root","content":"mysql -uroot -p123456"}
复制代码

论坛徽章:
0
发表于 2018-04-11 16:19 |显示全部楼层
回复 6# wh7211

谢谢可以了,请问怎么学习awk这种高端用法看不懂

论坛徽章:
8
戌狗
日期:2013-10-12 11:37:19双子座
日期:2014-05-06 14:40:39巨蟹座
日期:2014-06-14 09:22:18戌狗
日期:2014-09-18 16:05:44巨蟹座
日期:2014-12-27 16:37:26酉鸡
日期:2015-01-20 18:39:022015年亚洲杯之沙特阿拉伯
日期:2015-04-20 22:38:242015亚冠之萨济拖拉机
日期:2015-06-19 16:01:03
发表于 2018-04-12 07:57 |显示全部楼层
py的有木有 等py大神出没

论坛徽章:
19
程序设计版块每日发帖之星
日期:2016-05-03 06:20:0015-16赛季CBA联赛之山西
日期:2018-08-07 19:46:2315-16赛季CBA联赛之佛山
日期:2018-08-03 13:19:33黑曼巴
日期:2018-07-06 15:19:5015-16赛季CBA联赛之八一
日期:2018-07-05 10:34:0915-16赛季CBA联赛之八一
日期:2018-07-03 16:56:4615-16赛季CBA联赛之深圳
日期:2018-06-15 14:59:3715-16赛季CBA联赛之青岛
日期:2018-06-08 13:45:2815-16赛季CBA联赛之同曦
日期:2018-06-04 19:42:2015-16赛季CBA联赛之山东
日期:2018-05-30 12:44:59CU十四周年纪念徽章
日期:2018-05-15 11:36:3815-16赛季CBA联赛之广东
日期:2018-05-14 09:52:42
发表于 2018-04-12 16:26 |显示全部楼层
回复 7# wjw870907


系统的看看书加上多做题就能很快提高

论坛徽章:
29
申猴
日期:2014-04-10 09:43:532015年迎新春徽章
日期:2015-03-04 09:58:112015年亚洲杯纪念徽章
日期:2015-03-20 14:40:232015亚冠之阿尔纳斯尔
日期:2015-06-02 18:59:042015亚冠之阿尔希拉尔
日期:2015-06-30 15:22:572015亚冠之大阪钢巴
日期:2015-07-20 10:44:332015亚冠之阿尔纳斯尔
日期:2015-10-28 14:57:5215-16赛季CBA联赛之新疆
日期:2015-12-25 10:18:45黑曼巴
日期:2016-06-26 21:39:5315-16赛季CBA联赛之山西
日期:2016-07-25 21:54:2715-16赛季CBA联赛之北京
日期:2016-10-27 12:07:2315-16赛季CBA联赛之八一
日期:2017-07-07 16:39:09
发表于 2018-04-12 21:23 |显示全部楼层
回复 8# prcardin
python 3
import re
a=['sex','age','name','time','user','content']
with open ('file.txt') as f:
        for i in f:
                t=re.split(r'-{2,}|\.|T|',i.strip("\n"))
                b=re.sub(r' [^  ]+$',"",t[0]).split(" ")
                b.append(t[1])
                print (dict(zip(a,b+t[len(t)-1:])))

您需要登录后才可以回帖 登录 | 注册

本版积分规则

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号 北京市公安局海淀分局网监中心备案编号:11010802020122
广播电视节目制作经营许可证(京) 字第1234号 中国互联网协会会员  联系我们:wangnan@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP