求教一下统计目录下所有文件中符合条件的行数

响亮的名字

现有一个文件夹，里面大约20000个文件，每个文件中都有N行数据，现在需要统计每个文件下包含某特定字符串（如【啊啊啊】）的行数，最终汇出到一个文件
文件格式为：
文件名  行数
1.txt    20


for循环和while read line用得还不是很熟（没有编程基础），shell是为了处理网站日志现学现卖的

我暂时是这样做的


cd F:/txt/
ls >../list.txt
#list.txt里面会有乱码……不知道为什么，于是只好手动把乱码的东西替换掉。
cat ../list.txt|while read line
do
cat $line|grep -a '啊啊啊'|wc -l|sed "s/^/$line  /g"
done
>../ok.txt

试了很多次才不报错……但是我有些地方不太明白
（1）为什么ls导出文件会有乱码呢？而ls直接在cygwin里面显示就没有。
（2）不太明白程序是怎么执行的，是先读第一行，开始DO第一次，DONE后继续读第二行……知道都读完了，再写入到文件里吗？
是否可以没读一行都以>>的方式写入到文件里呢？
（3）最后发现没有得到想要的文件……虽然过程都在cygwin命令行里面显示出来了，但是没有存入到文件里，求教

我是个小白，真心求教导T^T


后来一个朋友告诉我这个
cd 目录
awk '{if($0~/啊啊啊/)print FILENAME}' *.log|uniq -c
打开所有文件，通过if语句判断是否一行（$0）同时匹配字符串【啊啊啊】，如果是则输出文件名到行……这样，会得到一个文件，每行都是文件名，通过uniq -c根据文件名的出现次数来获得各自文件中符合条件的行有多少个。
这个算法应该是比较科学的，效率应该比我那个要好多了，捂脸逃

haooooaaa

1. for i in `ls -1`
   
2. do
   
3.     grep -cH '啊啊啊' && sed 's/:/ /' > file.txt
   
4. done

复制代码

1. awk 'a!=FILENAME{if(a && n)print a,n>"file.txt";a=FILENAME;n=0}/啊啊啊/{++n}' *

复制代码

jason680

回复 1# 响亮的名字

1. find the key word "xxx"
$ grep -c xxx *
1.txt:3
16G.txt:10
bbb.txt:0
...
x.log:5
xx:0

2. remove without matched
$ grep -c xxx * | grep -v :0
1.txt:3
16G.txt:10
...
x.log:5

3. change ":" to tab "\t"
$ grep -c xxx * | grep -v :0 | sed 's/:/\t/'
1.txt        3
16G.txt        10
...
x.log        5

Note: column -t for good format

songyc_2015

回复 1# 响亮的名字

1. awk 'BEGIN{f="/tmp/sum.txt";print "文件名\t行数" > f}c&&d!=FILENAME{print d"\t"c > f;c=0}/xxx/{d=FILENAME;c++}END{print d"\t"c > f}' *.txt

复制代码

ydzcjj

1. 是不是文件名中有中文呢   因为windows的文件名中文编码默认为 GBK,而Linux中默认文件名编码为UTF8,而cygwin是unix系统所以都是utf8的
2.你是把ls得到的结果保存到list.txt  然后用while 循环 相当于每一次都cat一个文件吧  你说cat的第一行是读取ls的第一个文件  cat第一个文件就是读取第一个文件的全部内容了  然后再grep筛选出 “啊啊啊” wc -l统计行数
是全部读完了再写入文件  因为你的 >../ok.txt摆在外面了
3.没存到文件时因为。。。。。你每次cat完就要放进去ok.txt里面。。。

cat ../list.txt|while read line
do
cat $line|grep -a '啊啊啊'|wc -l|sed "s/^/$line  /g"  >> ../ok.txt
done
这样行不？

响亮的名字

回复 5# ydzcjj


路径的确是有中文，ls我单独处理了下，存入了list文件。
我后来自己重新写了下，发现搞定了，就是效率有点低

cd f:/hhhh
cat ../list.txt|while read line;do cat "$line"|grep '啊啊啊'|wc -l|sed "s/^/$line  /g";done >../ok.txt

ydzcjj

回复 6# 响亮的名字


    应该是要 >> ../ok.txt 吧   用这个>会把之前的记录都删掉的  只会留下最后一次筛选的结果

Windows19

各位大大  过来帮我看看