文本内容替换的脚本，帮看是否能够优化一下

merlin852

大概200个目录，500个文件左右？
总共200*500=10w个文件，每个文件3w行？

bugouhen

原帖由 莫良23 于 2009-12-28 13:04 发表
每次用sed来处理100个文件肯定比100次调用sed每次处理一个文件要快

您的意思是
先读取 新旧卡号变量
然后循环 sed 所有的文件

？

莫良23

每次用sed来处理100个文件肯定比100次调用sed每次处理一个文件要快

bluewaterray

用Hash做，原始值作为key，替换值作为value

bugouhen

原帖由 nhw_cs 于 2009-12-28 11:49 发表



淡有时候也可以扯, 但不能胡扯. 愿闻其详: shell与sed区别到底是啥啊

恩  请23 帮忙解释一下。。
谢谢

我现在是找了个性能好点的机器跑 感觉快了点哈

ywlscpl

不知道这样会不会快点？还是会更慢

1. DIR="xxxx"
   
2. for i in `cat name.txt `
   
3. do
   
4.   cd $DIR/$i
   
5.   for file in *.DAT
   
6.   do
   
7.     awk -F, -v OFS=, 'NR==FNR{split($0,m,".");a[m[1]]=m[2];delete m}NR>FNR{if ($6 in a) $6=a[$6];$1=$1;print}' $DIR/a.txt $file >$file.new
   
8.     \mv -f $file.new $file
   
9.   done
   
10. done

复制代码

nhw_cs

原帖由 莫良23 于 2009-12-28 11:24 发表
把那个sed用shell来代替

淡有时候也可以扯, 但不能胡扯. 愿闻其详: shell与sed区别到底是啥啊

bugouhen

原帖由 莫良23 于 2009-12-28 11:24 发表
把那个sed用shell来代替

把sed那句写成 sh
sh   sed.sh   ？


是这个意思吧 ？？
这样会提升速度么 ?？

xiexie

[ 本帖最后由 bugouhen 于 2009-12-28 12:27 编辑 ]

莫良23

把那个sed用shell来代替

bugouhen

麻烦 请楼上的 多解释一下好么
谢谢