文本内容替换的脚本，帮看是否能够优化一下

bugouhen

大家好
现手头有一批要替换的文本文件，写了个脚本请大家帮忙看一下是否能够再优化一下。这个循环太多了 速度实在是太慢

如下
a.txt
前后是新旧两组号码，要把指定文本的包含的旧号码，换成后面对应的新号码，大概300数据
140200003700.140200042852
142600009182.142600069906
142300003784.142300033332
142600009618.142600084180
142600038153.142600066756
142600002050.142600066015
142300003729.142300033319
142600014686.142600072919

tail 14_10002_2009348_VIP.DAT   这些DAT文件即为要替换的文本，每个DAT文件平均大概3w行数据左右
14,10002,2009348     ,14030065    ,100037,2009-12-21 19:59:37,2.00         ,140300020299,
14,10002,2009348     ,14270093    ,100247,2009-12-21 19:59:37,2.00         ,142700107999,
14,10002,2009348     ,14010023    ,100290,2009-12-21 19:59:37,2.00         ,140100141364
把后面的卡号 用a.txt中的对应内容替换

脚本：
for i in `cat name.txt `
do
cd DIR/$i
for a in `cat DIR/a.txt`
do
old=`echo $a |awk -F . {'print $1'}`
new=`echo $a |awk -F . {'print $2'}`
sed -i  s/"${old}"/"${new}"/g  DIR/$i/*.DAT
done
done
其中name.txt是一个 目录的列表 ，每个列表下有多个 DAT文件。大概200个目录，500个文件左右。

大家看一下我这个循环是否还能在优化一下  ，我测试了一下 跑起来实在是太慢了 全跑一次 大概要 一整天。。
或者能提供一个能提高一下速度的思路  

谢谢

[ 本帖最后由 bugouhen 于 2009-12-28 11:39 编辑 ]

lbaby

并行跑吧，这些数据没有关连的

beginner-bj

好的，明白了。

ywlscpl

你确定楼主的xxxx文件里是一行一个的？楼主可没说

kilior

for i in `cat xxxxx`
效率之低，浪费多少内才能，知道吗？
全给我改成：

1. 
   
2. while read i ;do
   
3. echo $i
   
4. done << xxxxx
   

复制代码

deargodzw

用C吧

korpus

写程序会比SHELL更快么？

ywlscpl

我错了。有时候脑袋一根筋，都没去想原来数据是怎样的

ly5066113

$0没变化，就原样输出啊，FS本就是 ,   为什么一定要 OFS 生效呢？

ywlscpl

原帖由 ly5066113 于 2009-12-28 15:44 发表
不需要啊，$6=a[$6] 就可以了

!($6 in a)的就不执行这句 $6=a[$6] 了