超多字段的文本想使用awk分裂为多个文件,寻求帮助!

我是DBA

原帖由 ly5066113 于 2008-12-30 15:57 发表
思路都知道了，就是代码实现了贝。写3个循环就好了。

awk -F, '/^BTS/{split($1,a,"[ /]");
printf a[2]","a[3]","a[4] > "file1"
for(i=2;i "file1"
print "" > "file1"
printf a[2]","a[3]","a[4] > " ...

输出用追加的比较好吧

ly5066113

为何？文件句柄不关闭，就一直处于打开的状态。
> 和 >> 只是在打开文件时有区别。

ynchnluiti

我没用那么多字段测试。

cat bts
BTS 20/1/0,1,0,1068,1.46,7,10520,7201,0,0,191,0.28,5,2014,7201,0,0,224,0.31,4,2263,7201,0,0
BTS 20/1/1,1,0,1068,1.46,7,10520,7201,0,0,191,0.28,5,2014,7201,0,0,224,0.31,4,2263,7201,0,0
BTS 20/1/2,1,0,1068,1.46,7,10520,7201,0,0,191,0.28,5,2014,7201,0,0,224,0.31,4,2263,7201,0,0
BTS 20/2/0,1,0,1068,1.46,7,10520,7201,0,0,191,0.28,5,2014,7201,0,0,224,0.31,4,2263,7201,0,0
BTS 20/2/1,1,0,1068,1.46,7,10520,7201,0,0,191,0.28,5,2014,7201,0,0,224,0.31,4,2263,7201,0,0
BTS 20/2/2,1,0,1068,1.46,7,10520,7201,0,0,191,0.28,5,2014,7201,0,0,224,0.31,4,2263,7201,0,0

1. 
   
2. awk 'BEGIN{FS=OFS=",";f1="out1";f2="out2";f3="out3";n=10;fs="out"}
   
3. /^BTS/{
   
4. sub(/.* /,"",$1);gsub(/\//, ",", $1);
   
5. for(i=1;i<=3;i++)printf $1""OFS>fs""i;
   
6. for(i=2;i<=NF;i++){
   
7.     f=i>n&&i<2*n+1?f2:(i<=n?f1:f3);
   
8.     printf "%s%s", $i, i%n&&i<NF?",":"\n" >f
   
9. }
   
10. }' bts
    

复制代码

metaxing

由于每个输出文件的前几个字段还需要都利用源文件的首字段,所以Tim的更切近目的,不过我还没有彻底弄明白!
问题:这段代码直接在命令行上使用,我将Gawk.exe程序拷贝到源文件和输出文件相同的目录,并将源文件名更新后,命令行如下:

Gawk -F, '/^BTS/{split($1,a,"[ /]");
printf a[2]","a[3]","a[4] > "file1"
for(i=2;i<=200;i++) printf ","$i > "file1"
print "" > "file1"
printf a[2]","a[3]","a[4] > "file2"
for(i=201;i<=399;i++) printf ","$i > "file2"
print "" > "file2"
printf a[2]","a[3]","a[4] > "file3"
for(i=400;i<=NF;i++) printf ","$i > "file3"
print "" > "file3"
}' "aOFS_BTS_P08000800"

在Windows的命令行提示:The system cannot find the file specified.

这里不知出何问题?
应该说Gawk在Windows下和在UNIX下是没有太大差别吧!

ly5066113

那还是写脚本吧。
unix下的单引号在Windows下要用双引号，反之也一样。

metaxing

看来Windows下和UNIX下的细微差别还是得注意,否则弄得莫名其妙不知道问题出在那里了!

先谢谢各位U友了,我会在节后逐一找U友直接交流,彻底弄懂,并将结果和理解更新在此贴上!
在此先谢各位了!以前稀里糊涂的照猫画虎已经越来越不行了,必须下功夫彻底弄明白才能真正做到举一反三!

在此也祝各位U友新年快乐!

ynchnluiti

修改了一下。

1. 
   
2. awk 'BEGIN{FS=OFS=",";f1="out1";f2="out2";f3="out3";n=200;fs="out"}
   
3. /^BTS/{
   
4. sub(/.* /,"",$1);gsub(/\//, ",", $1);
   
5. 
   
6. for(i=1;i<=((NF>2*n+1)?3:(NF>n?2:1));i++)printf $1""OFS>fs""i;
   
7. for(i=2;i<=NF;i++){
   
8.     f=(i>n&&i<2*n)?f2:(i<=n?f1:f3);
   
9.     printf "%s%s", $i, (i!=n&&i!=2*n-1&&i<NF)?",":"\n" >f
   
10. }
    
11. }' bts
    

复制代码

ynchnluiti

测试代码。把拆开的再合并。

1. 
   
2. sed -i 's/\([0-9]*\),\([0-9]*\),\([0-9]*\)/BTS \1\/\2\/\3/' out1
   
3. paste -d ',' out1 <(cut -d, -f4- out2) <(cut -d, -f4- out3)>ttt
   
4. diff ttt bts |xargs -i printf "%.160s\n" {}
   

复制代码

或者vi -d ttt bts看看

我是DBA

原帖由 ly5066113 于 2008-12-30 16:18 发表
为何？文件句柄不关闭，就一直处于打开的状态。
> 和 >> 只是在打开文件时有区别。

我错了，学习了，致敬。。