交错输出两个文件的各行，shell效率极差（可能是我方法不好）

wxdlut

mdsp228:~/liutong # wc -l 1.txt
149715 1.txt
mdsp228:~/liutong # wc -l 2.txt
150283 2.txt


SHELL 效率：1s钟生成一条数据

1. mdsp228:~/liutong # cat gen_data.sh
   
2. #!/bin/bash
   
3. 
   
4. num=$1
   
5. for (( i=1; i<=$num; i++ ))
   
6. do
   
7.         sed -n "${i}p" 1.txt
   
8.         sed -n "${i}p" 2.txt ;
   
9. done
   

复制代码

C语言：效率——不到1s，生成所有数据
感叹一下，工作之后都不用C语言了，曾经我的最爱。。。心里有点郁闷

1. mdsp228:~/liutong # cat gen_data.c
   
2. #include <stdio.h>
   
3. 
   
4. int main()
   
5. {
   
6. 
   
7.         FILE *fp1_read;
   
8.         FILE *fp2_read;
   
9.         FILE *fp_write;
   
10. 
    
11.         char str1[256];
    
12.         char str2[256];
    
13. 
    
14.         if(NULL == (fp1_read=fopen("1.txt","r")))
    
15.         {
    
16.                 printf("read ab.txt error\n");
    
17.                 return 1;
    
18.         }
    
19. 
    
20.         if(NULL == (fp2_read=fopen("2.txt","r")))
    
21.         {
    
22.                 printf("read cd.txt error\n");
    
23.                 return 1;
    
24.         }
    
25. 
    
26.         if(NULL == (fp_write=fopen("data_res.txt","w")))
    
27.         {
    
28.                 printf("read data_res.txt error\n");
    
29.                 return 1;
    
30.         }
    
31.       
    
32.         while (fgets(str1,256,fp1_read) != NULL && fgets(str2,256,fp2_read) != NULL)
    
33.         {
    
34. //              printf("%s",str1);
    
35. //              printf("%s",str2);
    
36.                 fputs(str1,fp_write);
    
37.                 fputs(str2,fp_write);
    
38. 
    
39.         }
    
40. 
    
41. 
    
42. 
    
43.         fclose(fp1_read);
    
44.         fclose(fp2_read);
    
45. 
    
46. 
    
47.         return 0;
    
48. }

复制代码

yinyuemi

回复 1# wxdlut


    awk 'BEGIN{while(getline <"2.txt"){print;getline <"1.txt"; print}}'

winway1988

1. $ paste -d '\n' <(seq 1 10) <(seq 11 20)
   
2. 1
   
3. 11
   
4. 2
   
5. 12
   
6. 3
   
7. 13
   
8. 4
   
9. 14
   
10. 5
    
11. 15
    
12. 6
    
13. 16
    
14. 7
    
15. 17
    
16. 8
    
17. 18
    
18. 9
    
19. 19
    
20. 10
    
21. 20

复制代码

惟吾无为

bash

exec给俩文件指定fd
read对应fd。

手机敲代码不方便。

wxdlut

这个方法不错，效率也很高。谢谢。看来awk还是得再好好学学
回复 2# yinyuemi


   

waker

你打开了多少次文件?

waker

paste -d'\n' 1.txt 2.txt

wxdlut

佩服。我思维定势了，以为paste -d分隔符只能是达到行与行的合并，类似于如下效果

1. mdsp228:~/liutong/test # cat 1.txt
   
2. abd
   
3. ef
   
4. mdsp228:~/liutong/test # cat 2.txt
   
5. gogo
   
6. gh
   
7. ee
   
8. mdsp228:~/liutong/test # paste -d'#' 1.txt 2.txt  
   
9. abd#gogo
   
10. ef#gh
    
11. #ee

复制代码

回复 7# waker


   

ivhb

waker 发表于 2012-10-31 11:27
你打开了多少次文件?

和打开文件次数比，更大的开销应该是进程的开销吧。启停了数万次的进程，系统确实很累

waker

ivhb 发表于 2012-10-31 22:55
和打开文件次数比，更大的开销应该是进程的开销吧。启停了数万次的进程，系统确实很累

关键不但打开了,每次打开还从头到尾处理了一遍文件