免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 程序设计 › C/C++ › 求教：关于大文件读写会一次读入内存吗

123 / 3 页下一页

最近访问板块

发新帖

楼主: iWonderLinux

上一主题

下一主题

求教：关于大文件读写会一次读入内存吗 [复制链接]

论坛徽章:: 0

11楼 [报告]

发表于 2012-05-09 13:22 |只看该作者

难道是c库的文件操作有问题，你隔一段时间flush一下

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

12楼 [报告]

发表于 2012-05-09 13:25 |只看该作者

好的，非常感谢，本人对linux的文件内存映射等机制不是很了解，不过刚查了下flush，可能是这个问题，感激！！！
回复 11# doswin

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

招聘 : 项目经理

论坛徽章:: 0

13楼 [报告]

发表于 2012-05-09 13:36 |只看该作者

"发现1G内存差不多用完"
怎么发现的, 贴出来看看

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

14楼 [报告]

发表于 2012-05-09 13:57 |只看该作者

回复 10# iWonderLinux

你可以调用fflush，fsync强制将缓存写到磁盘。来验证是否是文件缓存引起的问题——我不认为是这个问题。
试验一下吧。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

15楼 [报告]

发表于 2012-05-09 13:57 |只看该作者

就用top命令看的啊
回复 13# huohulwz

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

16楼 [报告]

发表于 2012-05-09 14:09 |只看该作者

果然还不是flush的问题，内存还是持续被消耗，就一个简单的socket接收网络数据写入文件，不明白内存在哪泄露了。
回复 14# GFree_Wind

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

17楼 [报告]

发表于 2012-05-09 14:12 |只看该作者

那看不懂了。。不会是你看错了吧

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

招聘 : 项目经理

论坛徽章:: 0

18楼 [报告]

发表于 2012-05-09 14:42 |只看该作者

回复 15# iWonderLinux

数据呢, 贴出来看看

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

19楼 [报告]

发表于 2012-05-09 14:52 |只看该作者

Mem: 1185688k total, 633908k used, 551780k free, 37592k buffers

top命令后，看到total和used差不多，free的很少，这个能证明吗？
回复 18# huohulwz

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

20楼 [报告]

发表于 2012-05-09 16:18 |只看该作者

iWonderLinux 发表于 2012-05-09 14:52
Mem: 1185688k total, 633908k used, 551780k free, 37592k buffers

top命令后，看到total和us ...

崩溃了。。
linux会缓存很多东西，所以free的很少是正常的。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

123 / 3 页下一页

发新帖

Chinaunix › 论坛 › 程序设计 › C/C++ › 求教：关于大文件读写会一次读入内存吗

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP