免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 14555 | 回复: 4

fread()和fwrite()函数,一次最多可把多大的文件读入内存? [复制链接]

论坛徽章:
0
发表于 2011-09-14 13:57 |显示全部楼层
例如读一个几兆的文件,是不是应先申请一个几兆大的缓冲,然后fread()一次读完?
还是会有更好的办法啊?

论坛徽章:
0
发表于 2011-09-14 15:36 |显示全部楼层
  1. size_t fread(void *restrict ptr, size_t size, size_t nitems, FILE *restrict stream);
  2. size_t fwrite(const void *restrict ptr, size_t size, size_t nitems, FILE *restrict stream);
复制代码
多大都可以,你只管用size指定每次读写数据的大小,nitems指定要读写数据的数量

标准I/O库内部有缓冲机制,你不用管它。。

论坛徽章:
0
发表于 2011-09-14 16:10 |显示全部楼层
本帖最后由 bw_0927 于 2011-09-14 16:34 编辑

可不可以把ptr指定成一个几兆的大小的缓冲,而size指定成sizeof(ptr),nitems指定成1,一次性把整个大文件读到一个大缓冲中?

因为我的文件内容是一个标准的xml格式内容,用libxml库做解析的,所以需要对一个完整的xml文件进行操作。若多次读入的话libxml无法进行解析。

另外
xmlChar *buf;
int bufLen;
xmlDocDumpMemory(doc,  &buf, &bufLen);
我是对整个D盘做xml树形结构的,调试结果bufLen的值是8629459,树形结构没做完整.
对C盘做xml树形结构的话,调试结果bufLen的值是9878269,树形结构也是没做完整。

我不知道是libxml库对xmlChar*分配的内存存在最大限制,还是其他什么原因?


还有,不是说int型的最大值是65536的吗,怎么这边的bufLen会这么大?

论坛徽章:
0
发表于 2011-09-14 17:27 |显示全部楼层
short int 是 65535

论坛徽章:
1
2015年辞旧岁徽章
日期:2015-03-03 16:54:15
发表于 2011-09-14 17:45 |显示全部楼层
在turbo C 2.0下, int是两字节, 最大65535; 但楼主都可以解析XML了, 绝对不是turbo C;

另外, 如果是linux的话, mmap这个调用可以把文件映射到内存中
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

DTCC2020中国数据库技术大会

【架构革新 高效可控】2020年12月21日-23日第十一届中国数据库技术大会将在北京隆重召开。

大会设置2大主会场,20+技术专场,将邀请超百位行业专家,重点围绕数据架构、AI与大数据、传统企业数据库实践和国产开源数据库等内容展开分享和探讨,为广大数据领域从业人士提供一场年度盛会和交流平台。

http://dtcc.it168.com


大会官网>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:huangweiwei@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP