我的sed为何非常慢，是否有什么配置文件？

lcz88990200

sed "s/~^/\n/g"   file1
file1文件是从表中bcp出来的，记录用~^分隔，字段以!$分隔，整个文件就一个长串，大约有200万条记录，文件大小约500M，
我的suse linux9系统内存为8G，共享内存2G，但执行上面这个命令10多个小时都没结束。
我试了一下100行的文件很快就执行成功了。
我的sed为何非常慢，是否有什么配置文件？

L_kernel

你是打印结果，看看直接编辑文件如何？-i参数。

既然你的字段和记录都是这么标准的分隔了，为什么不用awk处理呢？

lcz88990200

@L_kernel记录不是定长的，awk是否可以指定记录分隔符？

lcz88990200

现在要对此文件进行分析，有没有其它更好的办法？
此文件是上级行发的，不然bcp出来时直接用~^作记录分隔符多好。苦啊！！！

blackold

try:

1. awk -v RS='~\\^' 1 urfile

复制代码

lcz88990200

@blackold谢谢。

blackold

lcz88990200 发表于 2012-10-25 10:13
@blackold谢谢。

行吗？

waker

如果除了~^连用之外没有使用这两个字符,目测用tr最快

L_kernel

lcz88990200 发表于 2012-10-25 09:11
@L_kernel记录不是定长的，awk是否可以指定记录分隔符？

当然可以的。RS这个变量。

lcz88990200

awk -v RS='~\\^' 1 urfile
已经OK了，谢谢。


用RS='~^'不行，RS='~\\^' 就可以了