免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 11572 | 回复: 8
打印 上一主题 下一主题

[文本处理] 取特殊字段 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2022-03-10 21:15 |只看该作者 |倒序浏览
原始文本如下:
{"basic"{"SHANAME":"test1","type":"10"},{"SHANAME":"test21","type":"221"},{"SHANAME":"test431","type":"31"},{"comp":"yyyy"}
{"basic"{"SHANAME":"@@@","type":"10"},{"SHANAME":"中文","type":"221"},{"SHANAME":"测试","type":"31"},{"comp":"yyyy"}


需要得到SHANAME后字段,最终结果如下:
"test1","test21","test431","@@@","中文","测试"


希望有不同的解法(awk、sed、grep、perl等),谢谢^_^

论坛徽章:
5
白羊座
日期:2014-10-28 11:23:27水瓶座
日期:2015-01-20 10:19:022015亚冠之柏斯波利斯
日期:2015-07-11 18:17:2015-16赛季CBA联赛之同曦
日期:2015-12-23 12:38:582016猴年福章徽章
日期:2016-02-18 15:30:34
2 [报告]
发表于 2022-03-12 18:40 |只看该作者
  1. [root home]# awk -vFS='"' '{for(i=1;i<=NF;i++){if($i=="SHANAME")printf("\"%s\",", $(i+2))}}END{print ""}' test.txt
复制代码

论坛徽章:
25
程序设计版块每日发帖之星
日期:2016-05-03 06:20:0015-16赛季CBA联赛之八一
日期:2018-07-05 10:34:09黑曼巴
日期:2018-07-06 15:19:5015-16赛季CBA联赛之佛山
日期:2018-08-03 13:19:3315-16赛季CBA联赛之山西
日期:2018-08-07 19:46:2315-16赛季CBA联赛之广夏
日期:2018-08-08 19:31:5015-16赛季CBA联赛之青岛
日期:2018-11-26 15:21:5015-16赛季CBA联赛之上海
日期:2018-12-11 09:45:3219周年集字徽章-年
日期:2020-04-18 23:54:5215-16赛季CBA联赛之深圳
日期:2020-04-19 21:40:19黑曼巴
日期:2022-04-03 17:55:1315-16赛季CBA联赛之八一
日期:2018-07-03 16:56:46
3 [报告]
发表于 2022-03-13 00:45 |只看该作者
回复 1# daixubinbin


  1. cat 1
  2. {"basic"{"SHANAME":"test1","type":"10"},{"SHANAME":"test21","type":"221"},{"SHANAME":"test431","type":"31"},{"comp":"yyyy"}
  3. {"basic"{"SHANAME":"@@@","type":"10"},{"SHANAME":"中文","type":"221"},{"SHANAME":"测试","type":"31"},{"comp":"yyyy"}

  4. awk -F"[{}:,]+" '{for(i=1;i<=NF;i++){if($i=="\"SHANAME\""){a=a?a","$(i+1):$(i+1)}}}END{print a}' 1
  5. "test1","test21","test431","@@@","中文","测试"
复制代码

论坛徽章:
20
程序设计版块每日发帖之星
日期:2015-10-11 06:20:0015-16赛季CBA联赛之山东
日期:2016-05-28 18:18:5615-16赛季CBA联赛之新疆
日期:2017-04-12 22:55:4715-16赛季CBA联赛之青岛
日期:2017-06-26 18:30:0315-16赛季CBA联赛之四川
日期:2017-09-04 12:27:0315-16赛季CBA联赛之福建
日期:2018-02-09 14:28:3315-16赛季CBA联赛之同曦
日期:2018-04-17 12:43:3415-16赛季CBA联赛之浙江
日期:2018-07-14 13:27:4015-16赛季CBA联赛之吉林
日期:2018-09-13 15:48:2915-16赛季CBA联赛之新疆
日期:2016-05-07 05:05:3215-16赛季CBA联赛之八一
日期:2016-03-14 12:32:06程序设计版块每日发帖之星
日期:2015-12-12 06:20:00
4 [报告]
发表于 2022-03-16 16:27 |只看该作者
  1. grep -oP '(?<="SHANAME":)[^,]+' file
复制代码

论坛徽章:
0
5 [报告]
发表于 2022-03-19 18:56 |只看该作者
#cat file
{"basic"{"SHANAME":"test1","type":"10"},{"SHANAME":"test21","type":"221"},{"SHANAME":"test431","type":"31"},{"comp":"yyyy"}
{"basic"{"SHANAME":"@@@","type":"10"},{"SHANAME":"中文","type":"221"},{"SHANAME":"测试","type":"31"},{"comp":"yyyy"}


# awk -F',' '{for(i=1;i<=NF;i++)if($i~/"SHANAME"/){gsub(".*SHANAME\042:","",$i);f=f?f","$ii}}END{print f}' file
"test1","test21","test431","@@@","中文","测试"

# awk '{split($0,a,/"SHANAME":"[^"]+"/,b);for(i=1;i<=length(b);i++){split(b[i],t,":";f=f?f","t[2]:t[2]}}END{print f}' file
"test1","test21","test431","@@@","中文","测试"

# awk '{for(i=1;i<=NF;i++){split($i,t,":";f=f?f","t[2]:t[2]}}END{print f}' FPAT='SHANAME":"[^"]+"' file
"test1","test21","test431","@@@","中文","测试"

论坛徽章:
10
15-16赛季CBA联赛之同曦
日期:2016-06-11 19:22:4115-16赛季CBA联赛之深圳
日期:2020-05-31 16:13:5615-16赛季CBA联赛之同曦
日期:2020-01-28 12:42:47每日论坛发贴之星
日期:2016-08-09 06:20:00程序设计版块每日发帖之星
日期:2016-08-09 06:20:00每日论坛发贴之星
日期:2016-07-12 06:20:00程序设计版块每日发帖之星
日期:2016-07-12 06:20:00程序设计版块每日发帖之星
日期:2016-07-06 06:20:00程序设计版块每日发帖之星
日期:2016-07-04 06:20:0015-16赛季CBA联赛之佛山
日期:2021-02-26 09:33:41
6 [报告]
发表于 2022-03-22 13:34 |只看该作者
perl -ne '@a=$_=~/(?<=SHANAME"([^,]+)(?=,"/g;push @x,@a;END{print join ",",@x}'

论坛徽章:
1
19周年集字徽章-年
日期:2020-10-29 09:39:21
7 [报告]
发表于 2022-03-31 09:01 |只看该作者
  1. perl -0nE'say join",",/SHANAME":([^,]+)/g'
复制代码

论坛徽章:
0
8 [报告]
发表于 2022-07-01 11:26 |只看该作者
  1. awk -F'[,:]' '{for(i=1;i<=NF;i++){if($i~/SHANAME/)res=res","$(i+1)}}END{sub(",","",res);print res}' 1
复制代码

论坛徽章:
0
9 [报告]
发表于 2022-09-14 15:54 |只看该作者
本帖最后由 gigabit 于 2022-09-14 15:56 编辑
  1. cat 1.txt | grep -oP '(?<=E":)[^,]+,' | xargs -d '\n' | sed -e 's/[ ]//g' -e 's/,$//g' >2.txt
  2. cat 2.txt
复制代码

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP