超多字段的文本想使用awk分裂为多个文件,寻求帮助!

metaxing

我在处理数据过程中,有一个文件字段数达588个,在Windows下要导入Access,但Access最大支持字段数255个,无法直接导入,故希望将此源文件每行按200个字段(因后续处理还需增加一些字段,不能用最大字段数)分裂后输出到三个文件中,而且每个输出文件的前三个字段都取自源文件对应行的第一个字段中"/"分开的三个数字部分!
当然还有个条件就是,只输出源文件中"BTS"字符起始的行!

源文件内容如下:


目标文件一则为:
20,1,0,1068,1.46,7,10520,7201,0,0    即源文件第一字段分裂为3个字段,后续为源文件第2-200字段
20,1,1,191,0.28,5,2014,7201,0,0
20,1,2,224,0.31,4,2263,7201,0,0

....
目标文件二则为:
20,1,0,...   即源文件第一字段分裂为3个字段,后续为源文件第201-399字段
20,1,1,...
20,1,2,...

目标文件二则为:
20,1,0,...   即源文件第一字段分裂为3个字段,后续为源文件第400-588字段
20,1,1,...
20,1,2,...


看了网上和论坛上的相关帖子,但是基础太弱,始终没有看明白,希望高人指点,再根据指点总结学习!先谢了!

nuclearxin

没人回竟然。
呵呵 大多数是588个字段的 ；但是有一个是587个字段
这个怎么处理？

nuclearxin

告诉你个秘方 就是 给点积分 绝多嗷嗷多的人帮你

biglazybug

呵呵 实在是没看懂lz说的 东一头西一头的看的迷迷糊糊的

ynchnluiti

原帖由 nuclearxin 于 2008-12-30 15:48 发表
告诉你个秘方 就是 给点积分 绝多嗷嗷多的人帮你

他只有1分

nuclearxin

原帖由 ynchnluiti 于 2008-12-30 15:50 发表

他只有1分

没注意
1分给我我也要～～@）

biglazybug

你这说句话都2分了

ly5066113

思路都知道了，就是代码实现了贝。写3个循环就好了。

awk -F, '/^BTS/{split($1,a,"[ /]");
printf a[2]","a[3]","a[4] > "file1"
for(i=2;i<=200;i++) printf ","$i > "file1"
print "" > "file1"
printf a[2]","a[3]","a[4] > "file2"
for(i=201;i<=399;i++) printf ","$i > "file2"
print "" > "file2"
printf a[2]","a[3]","a[4] > "file3"
for(i=400;i<=NF;i++) printf ","$i > "file3"
print "" > "file3"
}' urfile

当然这段代码是可以优化的，比如a[2]","a[3]","a[4]可以用个变量，循环可以写一个，然后文件名用变量。

[ 本帖最后由 ly5066113 于 2008-12-30 16:01 编辑 ]

metaxing

原来的ID丢了,找不回来了,只有重头再来,没关系,不管是多少个都可以送出去!马上找找怎么改悬赏分!
只希望自己把以前的知识能够重拾回来!

jinl

200个字段分割
awk '{for (i=1;i<=200;i++) printf $i"\t" > "1.txt";printf "\n";
for (i=201;i<=400;i++) printf $i"\t" > "2.txt";printf "\n";
for (i=401;i<=NF;i++) printf $i"\t" > "3.txt";printf "\n"}' ufile
死办法，要是想通用性更强，可以使用i%200来自动生成文件名，不过我偷懒了

[ 本帖最后由 jinl 于 2008-12-30 16:07 编辑 ]