免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 7638 | 回复: 9
打印 上一主题 下一主题

[文本处理] 【求助】awk分割列输出到单独的文件中 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2016-02-15 16:31 |只看该作者 |倒序浏览
需求:有一文件a.txt,格式如下
9848fd87-9eae        阳泉市                苹果|手机|摄影手机|5.0-4.6英寸|陀螺仪,指纹识别|4000及以上|iPhone 6        9.0.2        750*1334        010105;1.46|01010502;1.46       
9848fd87-9eaa        阳泉市                苹果|手机|摄影手机|5.2-4.6英寸|陀螺仪,指纹识别|4000及以上|iPhone 6        9.0.2        750*1334        010101;1.47|01010501;1.49

需要单独生成如下的文件
9848fd87-9eae  010105 1.46
9848fd87-9eae  01010502 1.46
9848fd87-9eaa  010101 1.47
9848fd87-9eaa  01010501 1.49

也就是将文件第一列抽取,然后第7列按照|分割为多行,再按照;分割为多列输出


#!/bin/sh
FILE1=$1
touch b.txt
cat $1 |while read line
do
   first=`echo $line |awk  '{print $1}' `
    str=`echo $line |awk  '{print $7}' `

    echo -e $line | awk -F"|" '{for(i=1;i<=NF;i++)print $i }' > b.txt
done
获得的first的第一列如何附加到awk输出中,请大神赐教。

论坛徽章:
0
2 [报告]
发表于 2016-02-15 16:58 |只看该作者
大神出手帮下忙啊

论坛徽章:
2
射手座
日期:2014-10-10 15:59:4715-16赛季CBA联赛之上海
日期:2016-03-03 10:27:14
3 [报告]
发表于 2016-02-15 17:21 |只看该作者
回复 1# tippoint
  1. awk '{_l=split($7,a,"|");for(i=1;i<=_l;i++)print $1,gensub(";"," ","g",a[i])}' file
  2. 9848fd87-9eae 010105 1.46
  3. 9848fd87-9eae 01010502 1.46
  4. 9848fd87-9eaa 010101 1.47
  5. 9848fd87-9eaa 01010501 1.49
复制代码

论坛徽章:
54
2015亚冠之德黑兰石油
日期:2015-07-07 13:00:1615-16赛季CBA联赛之深圳
日期:2016-03-31 09:03:5415-16赛季CBA联赛之辽宁
日期:2016-05-09 20:38:15程序设计版块每日发帖之星
日期:2016-05-12 06:20:0015-16赛季CBA联赛之四川
日期:2016-05-13 15:19:4715-16赛季CBA联赛之福建
日期:2016-05-15 20:24:34每日论坛发贴之星
日期:2016-05-16 06:20:0015-16赛季CBA联赛之吉林
日期:2016-05-26 11:49:4715-16赛季CBA联赛之广东
日期:2016-05-26 13:49:18极客徽章
日期:2016-12-07 14:05:2315-16赛季CBA联赛之广夏
日期:2016-12-20 17:33:532017金鸡报晓
日期:2017-01-10 15:19:56
4 [报告]
发表于 2016-02-15 17:45 |只看该作者
  1. awk '{$2=$NF;NF=2;gsub("\\|","\n"$1" ");gsub(";"," ")}1' file
复制代码

论坛徽章:
0
5 [报告]
发表于 2016-02-15 17:53 |只看该作者
太牛了,谢谢回复 3# yinyuemi


   

论坛徽章:
20
程序设计版块每日发帖之星
日期:2015-10-11 06:20:0015-16赛季CBA联赛之山东
日期:2016-05-28 18:18:5615-16赛季CBA联赛之新疆
日期:2017-04-12 22:55:4715-16赛季CBA联赛之青岛
日期:2017-06-26 18:30:0315-16赛季CBA联赛之四川
日期:2017-09-04 12:27:0315-16赛季CBA联赛之福建
日期:2018-02-09 14:28:3315-16赛季CBA联赛之同曦
日期:2018-04-17 12:43:3415-16赛季CBA联赛之浙江
日期:2018-07-14 13:27:4015-16赛季CBA联赛之吉林
日期:2018-09-13 15:48:2915-16赛季CBA联赛之新疆
日期:2016-05-07 05:05:3215-16赛季CBA联赛之八一
日期:2016-03-14 12:32:06程序设计版块每日发帖之星
日期:2015-12-12 06:20:00
6 [报告]
发表于 2016-02-15 17:54 |只看该作者
  1. awk -F '[ |;]+' '{print $1,$13,$14};{print $1,$15,$16}'  b   
  2. 9848fd87-9eae 010105 1.46
  3. 9848fd87-9eae 01010502 1.46
  4. 9848fd87-9eaa 010101 1.47
  5. 9848fd87-9eaa 01010501 1.49
复制代码

论坛徽章:
24
申猴
日期:2014-10-10 15:56:39射手座
日期:2014-10-10 15:57:18黑曼巴
日期:2018-05-14 11:05:122016科比退役纪念章
日期:2018-05-14 11:05:0715-16赛季CBA联赛之北控
日期:2018-05-14 11:05:0015-16赛季CBA联赛之江苏
日期:2017-02-27 18:11:0715-16赛季CBA联赛之上海
日期:2018-08-15 09:48:5415-16赛季CBA联赛之佛山
日期:2018-07-20 17:14:2315-16赛季CBA联赛之佛山
日期:2019-09-10 18:08:4615-16赛季CBA联赛之山西
日期:2020-03-26 09:40:5115-16赛季CBA联赛之佛山
日期:2020-05-08 09:03:54
7 [报告]
发表于 2016-02-15 18:36 |只看该作者
本帖最后由 chengchow 于 2016-02-16 10:25 编辑
  1. sed -r 's/^(\S+).*\s+([^;]+);([^\|]+)\|([^;]+);(.*)/\1 \2 \3\n\1 \4 \5/g' aa.log
  2. 9848fd87-9eae 010105 1.46
  3. 9848fd87-9eae 01010502 1.46        
  4. 9848fd87-9eaa 010101 1.47
  5. 9848fd87-9eaa 01010501 1.49

  6. sed -ri 's/\s+$//g'  aa.log
  7. awk -F '[| ]+' '{gsub(";"," ",$NF);gsub(";"," ",$(NF-1));print $1,$(NF-1)"\n"$1,$NF}' aa.log
  8. 9848fd87-9eae 010105 1.46
  9. 9848fd87-9eae 01010502 1.46
  10. 9848fd87-9eaa 010101 1.47
  11. 9848fd87-9eaa 01010501 1.49

复制代码

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
8 [报告]
发表于 2016-02-16 02:53 |只看该作者

What You Think Is What You Code(WYTIWYC)

也就是将文件第一列抽取,然后第7列按照|分割为多行,再按照分割为多列输出

$ awk '{t=split($7,a,"|");for(n=1;n<=t;++n){gsub(";"," ",a[n]);print $1,a[n]}}' a.txt
9848fd87-9eae 010105 1.46
9848fd87-9eae 01010502 1.46
9848fd87-9eaa 010101 1.47
9848fd87-9eaa 01010501 1.49

$ cat a.txt
9848fd87-9eae        阳泉市                苹果|手机|摄影手机|5.0-4.6英寸|陀螺仪,指纹识别|4000及以上|iPhone 6        9.0.2        750*1334        010105;1.46|01010502;1.46
9848fd87-9eaa        阳泉市                苹果|手机|摄影手机|5.2-4.6英寸|陀螺仪,指纹识别|4000及以上|iPhone 6        9.0.2        750*1334        010101;1.47|01010501;1.49

论坛徽章:
6
15-16赛季CBA联赛之浙江
日期:2021-07-14 11:18:4315-16赛季CBA联赛之浙江
日期:2021-08-20 17:26:1015-16赛季CBA联赛之天津
日期:2021-09-01 10:56:4619周年集字徽章-19
日期:2021-10-12 11:08:032016科比退役纪念章
日期:2021-10-12 11:33:4515-16赛季CBA联赛之深圳
日期:2021-11-11 14:25:38
9 [报告]
发表于 2021-09-02 15:15 |只看该作者
本帖最后由 a5love3n 于 2021-09-24 16:47 编辑
  1. 编辑掉
复制代码


您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP