免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 1860 | 回复: 9
打印 上一主题 下一主题

[文本处理] 把文本中的定长字段如何取出入数据库表 [复制链接]

论坛徽章:
1
数据库技术版块每日发帖之星
日期:2015-08-06 06:20:00
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2014-02-24 21:13 |只看该作者 |倒序浏览
我有文本1.txt,比如
0000012014年01月14日 0.01  小张
0000022014年01月15日12.00  小王
0000032014年01月16日 1.00  小华
。。。。。。
其中
前6位是编号
7-20位是日期
21-25位是金额
26-31位是名字
现在我想把文本中每行数据取出来,然后每行数据分成4个字段,并赋值插入到某表c_sql中
怎么做效率会比较高!!

论坛徽章:
1
技术图书徽章
日期:2013-09-25 21:06:29
2 [报告]
发表于 2014-02-24 21:24 |只看该作者
awk '{a=substr($0,1,6);b=substr($0,7,20);c=substr($0,21,25);d=substr($0,26,31)}{print a","b","c","}' 1.txt > 1.csv 然后用sqlldr将1.csv 导入到c_sql表中就可以啦

论坛徽章:
1
数据库技术版块每日发帖之星
日期:2015-08-06 06:20:00
3 [报告]
发表于 2014-02-24 21:29 |只看该作者
我是直接在shell中用insert插入表中,不用工具导入回复 2# yuloveban


   

论坛徽章:
29
程序设计版块每日发帖之星
日期:2016-02-29 06:20:0015-16赛季CBA联赛之天津
日期:2016-08-10 10:33:1115-16赛季CBA联赛之深圳
日期:2016-08-17 15:07:2015-16赛季CBA联赛之佛山
日期:2016-11-07 11:33:5015-16赛季CBA联赛之广夏
日期:2016-11-15 09:13:31CU十四周年纪念徽章
日期:2016-11-24 14:12:25极客徽章
日期:2016-12-07 14:03:4015-16赛季CBA联赛之深圳
日期:2016-12-07 17:15:2715-16赛季CBA联赛之北京
日期:2016-12-22 09:30:0115-16赛季CBA联赛之深圳
日期:2016-12-22 10:49:2115-16赛季CBA联赛之山西
日期:2017-02-10 09:05:3215-16赛季CBA联赛之同曦
日期:2017-02-27 14:19:08
4 [报告]
发表于 2014-02-24 22:15 |只看该作者
读一条插一条?
数据大的时候,这个效率肯定不高啊

论坛徽章:
1
数据库技术版块每日发帖之星
日期:2015-08-06 06:20:00
5 [报告]
发表于 2014-02-24 22:44 |只看该作者
也不会很多数据,考虑用read line,就是不知道怎么从一行取定长字段出来回复 4# elu_ligao


   

论坛徽章:
29
程序设计版块每日发帖之星
日期:2016-02-29 06:20:0015-16赛季CBA联赛之天津
日期:2016-08-10 10:33:1115-16赛季CBA联赛之深圳
日期:2016-08-17 15:07:2015-16赛季CBA联赛之佛山
日期:2016-11-07 11:33:5015-16赛季CBA联赛之广夏
日期:2016-11-15 09:13:31CU十四周年纪念徽章
日期:2016-11-24 14:12:25极客徽章
日期:2016-12-07 14:03:4015-16赛季CBA联赛之深圳
日期:2016-12-07 17:15:2715-16赛季CBA联赛之北京
日期:2016-12-22 09:30:0115-16赛季CBA联赛之深圳
日期:2016-12-22 10:49:2115-16赛季CBA联赛之山西
日期:2017-02-10 09:05:3215-16赛季CBA联赛之同曦
日期:2017-02-27 14:19:08
6 [报告]
发表于 2014-02-24 22:51 |只看该作者
  1. while read line
  2. do
  3.     seq=${line:0:6}
  4.     date=${line:6:10}  #日期你echo下看到底应该取多长, 大致就是${string:position:length} 这样可以取出
  5.     ...
  6. done < file
复制代码
回复 5# shmtu2005


   

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
7 [报告]
发表于 2014-02-24 23:51 |只看该作者
bash中可以用${parameter:offset:length}来截取字符串~

论坛徽章:
1
数据库技术版块每日发帖之星
日期:2015-08-06 06:20:00
8 [报告]
发表于 2014-02-25 15:40 |只看该作者
好,我试试看
elu_ligao 发表于 2014-02-24 22:51
回复 5# shmtu2005

论坛徽章:
1
数据库技术版块每日发帖之星
日期:2015-08-06 06:20:00
9 [报告]
发表于 2014-02-25 16:31 |只看该作者
在aix环境不行,报bad substitution
elu_ligao 发表于 2014-02-24 22:51
回复 5# shmtu2005

论坛徽章:
29
程序设计版块每日发帖之星
日期:2016-02-29 06:20:0015-16赛季CBA联赛之天津
日期:2016-08-10 10:33:1115-16赛季CBA联赛之深圳
日期:2016-08-17 15:07:2015-16赛季CBA联赛之佛山
日期:2016-11-07 11:33:5015-16赛季CBA联赛之广夏
日期:2016-11-15 09:13:31CU十四周年纪念徽章
日期:2016-11-24 14:12:25极客徽章
日期:2016-12-07 14:03:4015-16赛季CBA联赛之深圳
日期:2016-12-07 17:15:2715-16赛季CBA联赛之北京
日期:2016-12-22 09:30:0115-16赛季CBA联赛之深圳
日期:2016-12-22 10:49:2115-16赛季CBA联赛之山西
日期:2017-02-10 09:05:3215-16赛季CBA联赛之同曦
日期:2017-02-27 14:19:08
10 [报告]
发表于 2014-02-25 21:59 |只看该作者
回复 9# shmtu2005


    那就是7楼 星辰大大 说的bash中可这样截取, aix 好像是ksh吧
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP