免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 7653 | 回复: 6
打印 上一主题 下一主题

请教一下linux下写文件缓存机制 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2008-03-26 16:19 |只看该作者 |倒序浏览
比如:

while((n=read(network_fd,buf,1)!=0)
{
write(file_fd,buf,1);
}
fflush(file_fd);


这里是不是fflush时全部写到硬盘?
再如:
while((n=read(network_fd,buf,1))!=0)
{
write(file_fd,buf,1);
fflush(file_fd);
}

这里是不是也是fflush时就写硬盘?还是操作系统会有优化的?(我觉得在这种写一个字节到硬盘的操作操作系统肯定不会真正写的吧)

我的问题是如何实现缓存机制,比如读网络写本地文件时?
我要做到先读了1M的网络数据到内存,然后写到文件(要真正意义上的写到硬盘),应该怎样做呢?
或者说在linux下如何实现网络下载的硬盘缓存机制?

谢谢

论坛徽章:
0
2 [报告]
发表于 2008-03-26 16:24 |只看该作者
fflush()是针对标准IO库的. 我想你应该使用的是fsync().

论坛徽章:
0
3 [报告]
发表于 2008-03-26 17:29 |只看该作者
谢谢~
那么请问如何做到等到1M时才写呢?因为刚才查了一下fsync,操作系统会
定时的调用fsync,所有有可能还没有读到1M时系统就刷了一下,那么这种情况
该怎么办呢?谢谢

论坛徽章:
0
4 [报告]
发表于 2008-03-26 18:01 |只看该作者
原帖由 darkslack 于 2008-3-26 17:29 发表
谢谢~
那么请问如何做到等到1M时才写呢?因为刚才查了一下fsync,操作系统会
定时的调用fsync,所有有可能还没有读到1M时系统就刷了一下,那么这种情况
该怎么办呢?谢谢

你把这些问题仍给别的地方去考虑吧

论坛徽章:
0
5 [报告]
发表于 2008-03-26 19:13 |只看该作者
原帖由 flw2 于 2008-3-26 18:01 发表

你把这些问题仍给别的地方去考虑吧

???

论坛徽章:
0
6 [报告]
发表于 2008-03-26 19:19 |只看该作者
你把数据放在内存中, 有了1M的时候再调用write不行吗?

论坛徽章:
0
7 [报告]
发表于 2008-03-26 21:58 |只看该作者
fflush只是把缓冲区的数据放到内核缓冲区中去排队,并没有真正的写到硬盘。如果想写到硬盘就得用fsync。
如果你想从网络中读1M数据再定到硬盘,很简单啊,用readv。这个函数可以一起读好几个缓冲区,你组织一下。也可以用read读,每次读都把数据填写到iovec结构体中。再用writev把全部缓冲区一起写到内核缓冲区中, 这种方法有个好处,就是速度要快些。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP