awk处理时候的管道问题

wy200747055

形式一：
for file in $(cat fileList)
do
cat $file | awk 'do sth' >> res
done

形式二：
for file in $(cat fileList)
do
cat $file
done | awk 'do sth' > res

请问：
形式一是打开fileList中的每个文件，然后awk处理，将处理结果追加到res文件中。它对文件的处理是一个一个的处理的，占用内存小。
形式二是打开fileList中所有的文件，然后用awk处理呢；还是一个一个的打开用awk处理。它对文件的处理是一个一个的，还是全部一起处理？如果所有文件一起打开awk处理的话，占用内存比较大。我的fileList中包含的文件特别多，我担心形式二的处理方式会因为占用内存过大，导致服务器挂了。

ly5066113

回复 1# wy200747055


awk 都是一行一行处理的，不会占用很多内存，除非你用数组存储了文件中的所有记录。

yestreenstars

那就用方式一呗~{:3_193:}

yinyuemi

awk 本身就可以应付多文件的操作，干嘛还要用for循环呢