求教：关于大文件读写会一次读入内存吗

iWonderLinux

通过socket接收网络数据，一个小时后文件达到1G多，每次收到数据后就写入文件，发现1G内存差不多用完，请问有什么优化的办法吗？

doswin

你哪里没释放内存吧

iWonderLinux

只申请了一段内存用来存放接收的网络数据
回复 2# doswin


   

sonicling

你确定只申请了一次吗？debug跟踪一下看看。

GFree_Wind

看描述，还是有内存泄露。

即使OS不是立刻把数据写到硬盘，也不会一直缓存的。

iWonderLinux

一个线程接收网络数据，只申请了一个数组作为buffer，接收数据写入文件，即使泄露也不会达到1G多。
回复 4# sonicling


   

iWonderLinux

确定只申请了一次，应该不是内存泄露的问题，接收一个小时的文件大概1G，内存消耗1G左右，打开文件会把文件全部读入内存吗？
回复 5# GFree_Wind


   

doswin

iWonderLinux 发表于 2012-05-09 13:08
确定只申请了一次，应该不是内存泄露的问题，接收一个小时的文件大概1G，内存消耗1G左右，打开文件会把文件 ...

你觉得可能吗？
我觉得你发代码比较靠谱。肯定你哪里搞错了

iWonderLinux

1. while (1)
   
2.     {
   
3.        FD_ZERO(&fdR);
   
4.        FD_SET(sock, &fdR);
   
5. 
   
6.        rs = select(sock+1, &fdR, NULL,NULL, &timeout);
   
7.        if (rs == 0)
   
8.        {
   
9.            //printf("\rrs:%d",rs);
   
10.            continue;
    
11.        }
    
12.        len = recvfrom(sock,buff, BUFFSIZE,0,(struct sockaddr *)&c_addr, &addr_len);   //Recevie the UDP message.
    
13.       
    
14.        //printf("len:%d ",len);
    
15.       
    
16.        if (len < 0)
    
17.        {
    
18.            printf("Receive error :%s\n",strerror(errno));      
    
19.            exit(errno);
    
20.        }
    
21.        fwrite(buff,len,1,fp);

复制代码

buff就是我申请的内存4096字节。这段代码只是一部分
回复 8# doswin


   

iWonderLinux

写的过程中文件一直打开着，是这个影响吗？总不能频繁开关文件吧
回复 8# doswin