免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 3738 | 回复: 8
打印 上一主题 下一主题

[文本处理] awk处理文本的时候第一行是空行 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2013-10-14 20:59 |只看该作者 |倒序浏览
执行下面代码
awk '{a=-1;b=-1}{printf("%s\t %s\t %s\t %s\t %s\t %s\t %s\t %s\t","\n",$3,$1,$4,$5,a,b,$6)}' data.txt > new_data.txt
执行完以后new_data.txt多了第一行空白行,然后通过mysql load data local infile new_data.txt into table tb_report_table把数据插到数据库的表中的时候会插一条空白数据,只要主键是有值得,各位大侠给看看。。。谢谢!

论坛徽章:
33
ChinaUnix元老
日期:2015-02-02 08:55:39CU十四周年纪念徽章
日期:2019-08-20 08:30:3720周年集字徽章-周	
日期:2020-10-28 14:13:3020周年集字徽章-20	
日期:2020-10-28 14:04:3019周年集字徽章-CU
日期:2019-09-08 23:26:2519周年集字徽章-19
日期:2019-08-27 13:31:262016科比退役纪念章
日期:2022-04-24 14:33:24
2 [报告]
发表于 2013-10-14 21:10 |只看该作者
  1. awk 'BEGIN{a=-1;b=-1}{printf("%s\t %s\t %s\t %s\t %s\t %s\t %s\t %s\t","\n",$3,$1,$4,$5,a,b,$6)}' data.txt > new_data.txt
复制代码

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
3 [报告]
发表于 2013-10-14 21:33 |只看该作者
本帖最后由 关阴月飞 于 2013-10-14 21:33 编辑

回复 1# nickyjie


    目测一下:
  1. awk '{a=-1;b=-1}{printf "%s\t%s\t%s\t%s\t%s\t%s\t%s\n",$3,$1,$4,$5,a,b,$6}' data.txt > new_data.txt
  2. or
  3. awk '{$0=$3t$1t$4t$5t"-1"t"-1"t$6}1' t="\t"  data.txt > new_data.txt
复制代码

论坛徽章:
0
4 [报告]
发表于 2013-10-14 23:06 |只看该作者
回复 3# 关阴月飞


awk 'BEGIN{a=-1;b=-1}{printf("%s\t %s\t %s\t %s\t %s\t %s\t %s\t %s\t","\n",$3,$1,$4,$5,a,b,$6)}' data.txt
这里的“\n”是第一列,代表主键,运行mysql的load data命令的时候会主键会自增长,去掉或放其它地方会少一列,插入的数据就不对了   

论坛徽章:
0
5 [报告]
发表于 2013-10-14 23:07 |只看该作者
回复 2# Shell_HAT

还是不行,空行依然存在

   

论坛徽章:
33
ChinaUnix元老
日期:2015-02-02 08:55:39CU十四周年纪念徽章
日期:2019-08-20 08:30:3720周年集字徽章-周	
日期:2020-10-28 14:13:3020周年集字徽章-20	
日期:2020-10-28 14:04:3019周年集字徽章-CU
日期:2019-09-08 23:26:2519周年集字徽章-19
日期:2019-08-27 13:31:262016科比退役纪念章
日期:2022-04-24 14:33:24
6 [报告]
发表于 2013-10-15 08:17 |只看该作者
回复 5# nickyjie


    能否把data.txt压缩之后传上来看看

论坛徽章:
2
狮子座
日期:2014-01-02 10:47:24丑牛
日期:2014-02-13 17:58:37
7 [报告]
发表于 2013-10-15 09:21 |只看该作者
回复 1# nickyjie
LZ请转换下思路加入sed
  1. awk '{a=-1;b=-1}{printf("%s\t %s\t %s\t %s\t %s\t %s\t %s\t %s\t","\n",$3,$1,$4,$5,a,b,$6)}' data.txt | sed '1d' > new_date.txt
复制代码

论坛徽章:
5
未羊
日期:2014-08-04 16:15:21天秤座
日期:2014-08-13 13:52:372015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:112015亚冠之浦和红钻
日期:2015-06-29 15:30:48
8 [报告]
发表于 2013-10-15 09:28 |只看该作者
大胆猜测一下
  1. awk 'NR>1{a=-1;b=-1}{printf("%s\t %s\t %s\t %s\t %s\t %s\t %s\t %s\t","\n",$3,$1,$4,$5,a,b,$6)}' data.txt > new_data.txt
复制代码

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
9 [报告]
发表于 2013-10-15 10:23 |只看该作者
回复 4# nickyjie


第一列一定要是“\n"吗? 把第一列换成“\t” 可以不?
  1. awk '{a=-1;b=-1}{printf "%s%s\t%s\t%s\t%s\t%s\t%s\t%s\n","\t",$3,$1,$4,$5,a,b,$6}' data.txt > new_data.txt
  2. or
  3. awk '{$0=t$3t$1t$4t$5t"-1"t"-1"t$6}1' t="\t"  data.txt > new_data.txt  
复制代码
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP