shell 脚本求助 ，循环处理大量文件

hanhuanhuan

大家好，现在想用脚本处理test 目录下大量（10000多）文件，对每个文件的处理是相同的，先是删除前九行，然后对每个文件的第二列进行赋值，接着提取文件前四列，不知道这个循环怎么写。急需处理大量数据，求助

q1208c

我不是太明白这个问题的难度在哪里?
是不会取目录(test)下的文件呢?
还是不会写删除前9行?

yestreenstars

猜的：

1. awk 'NR>9{$2="xxoo";NF=4;print}' test/*

复制代码

love_shift

回复 3# yestreenstars
  赋值！

   

reyleon

貌似没啥难度!目测论坛里的大神,很少对没有数据的帖子感兴趣

yestreenstars

回复 4# love_shift

没搞懂他的赋值是啥意思，所以随便乱写了~
   

hanhuanhuan

回复 2# q1208c
对大神们来说肯定是不难的啥，我是shell脚本小白，现在在啃这一部分知识，有点慢。我知道用find找到目录下的文件然后用sed删除了1-9行，接着用awk给每个文件第二列符合条件的数值赋值（改成其他的值），但是不知道用循环（for或是其他的）怎么写，因为要把每次处理的文件输出来，接下还有其他的用处。所以在帖子上请教了，呵呵呵，还望多指教，是急着用这些数据，不过以后还是要把 linux shell好好学学。


   

hanhuanhuan

回复 3# yestreenstars
你好，首先先谢谢你啦。我的问题可能写的不太清楚。就是在test目录下有很多文件（数目不清楚），想先find这些文件（后缀都相同，.lammpstrj），然后删除每个文件前九行，接着对每个文件第二列符合条件的数值进行赋值（换成其他的数，比如第二列为1，则换成1.27，否则换成1.6）。每个文件都是这样的处理。想用循环做，因为接下来我还有其他的处理。不知道这个循环语句怎么写。对单个文件的操作我知道怎么弄，但是怎么循环，读取这些文件，再一个个处理后输出与原文件相同前缀的文件（比如原文件是0001.lammmpstrj，处理后输出成0001.txt文件）。在linux shell上还在学习。谢大神赐教。


   

q1208c

回复 7# hanhuanhuan

1. function process ()
   
2. {
   
3.     echo "##$1##"
   
4. }
   
5. for my_file in `find $1 -type f`
   
6. do
   
7.      process $my_file
   
8. done
   

复制代码

你这手也太新了.

hanhuanhuan

回复 9# q1208c




恩恩，还请多指教。先谢谢啦。帮我看看下面这个脚本，就测试了4个文件，老长时间都不出来结果，不知道什么原因。
#!/bin/bash
for i in ` find file -type f -name "*.lammpstrj" `
do
a=`sed -i '1,9d' $i`
cat $a | while read line
  do
 echo $line | awk '{if ($2=="1" print $1 ,$3 ,$4 ,$5 ,$6="1.27" ; else print $1 ,$3 ,$4 ,$5 ,$6="158"}'
  done
done