[求助] sed 变量字节

dreamone503

sed -n "/${a}/p"  file_in > file_out

其中
a="aaa\|bbb\|ccc\|ddd........省略n多.......\|mmmmmmm"



a的字节数有个最大限制貌似大概是  100,000C， 就是a再长就提示 Argument list too long.

请问这个问题怎么解决， 如果我a中想并列搜索的个数想更多。

PS: grep 中 a长度的限制也大概是差不多的。

谢谢

昭襄王

循环$a吧，不知道还有没有犀利的办法

lkk2003rty

搜索的东西有啥规律没？

dreamone503

没啥规律， 同样类型的东西， 但是名字都不一样

这样并列的目的是缩短时间，  如果一个一个搜时间会是N倍， 可是无奈我要搜索的大概有1万多个， 而现在看来只允许我列出2000个， 超过就会报错说 Argument list too long.

jason680

回复 1# dreamone503

try it
perl -lane 'BEGIN{$k=$ENV{'a'};$k=~s/\\//g}{print if /$k/;}' file_in   


perl -lane 'BEGIN{$k=$ENV{'a'};$k=~s/\\//g;print"key=$k\n"}{print if /$k/;}' file_in

dreamone503

能不用Perl么， 想用awk sed shell等。

谢谢楼上回答

jason680

回复 6# dreamone503


    你的問題,應該不是sed,awk...而是shell command過長....

try it

awk 'BEGIN{k=ENVIRON["a"];sub("\\|", "|", k)}{if(match($0,k)){print}}' file_in

dreamone503

回复  dreamone503


    你的問題,應該不是sed,awk...而是shell command過長....

try it

awk 'B ...
jason680 发表于 2010-11-05 16:06

   
那可有方法改进， 或者把原有限定额度变大。

dreamone503

自己顶一下， 这个瓶颈没找到解决方法啊， 不然就要分成几部分了

jason680

回复 9# dreamone503


    try it

    awk 'BEGIN{k=ENVIRON["a"];sub("\\|", "|", k)}{if(match($0,k)){print}}' file_in