免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 程序设计 › C/C++ › 急问：linux下多个线程同时写同一文件的方法
12下一页
最近访问板块 发新帖
查看: 6610 | 回复: 19
打印 上一主题 下一主题

急问：linux下多个线程同时写同一文件的方法 [复制链接]

Jass

论坛徽章:
0
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2007-06-15 00:11 |只看该作者 |倒序浏览
多个线程写同一个文件的不同位置，可以吗？？
ypxing

论坛徽章:
0
2楼 [报告]
发表于 2007-06-15 00:20 |只看该作者
当然可以了，要不然你用的多线程下载工具是怎么工作的，呵呵

原帖由 Jass 于 2007-6-15 00:11 发表
多个线程写同一个文件的不同位置，可以吗？？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
zx_wing

论坛徽章:
0
3楼 [报告]
发表于 2007-06-15 09:36 |只看该作者
原帖由 Jass 于 2007-6-15 00:11 发表
多个线程写同一个文件的不同位置，可以吗？？

最方便的方法，每个线程mmap文件的不同区域到自己的地址空间，注意制定SHARE标志
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
Jass

论坛徽章:
0
4楼 [报告]
发表于 2007-06-17 17:06 |只看该作者
原帖由 zx_wing 于 2007-6-15 09:36 发表

最方便的方法，每个线程mmap文件的不同区域到自己的地址空间，注意制定SHARE标志



能否给出一段示意性的代码来说明呢？？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
MMMIX

论坛徽章:
95
程序设计版块每日发帖之星 日期:2015-09-05 06:20:00程序设计版块每日发帖之星 日期:2015-09-17 06:20:00程序设计版块每日发帖之星 日期:2015-09-18 06:20:002015亚冠之阿尔艾因 日期:2015-09-18 10:35:08月度论坛发贴之星 日期:2015-09-30 22:25:002015亚冠之阿尔沙巴布 日期:2015-10-03 08:57:39程序设计版块每日发帖之星 日期:2015-10-05 06:20:00每日论坛发贴之星 日期:2015-10-05 06:20:002015年亚冠纪念徽章 日期:2015-10-06 10:06:482015亚冠之塔什干棉农 日期:2015-10-19 19:43:35程序设计版块每日发帖之星 日期:2015-10-21 06:20:00每日论坛发贴之星 日期:2015-09-14 06:20:00
5楼 [报告]
发表于 2007-06-17 17:14 |只看该作者
原帖由 ypxing 于 2007-6-15 00:20 发表
当然可以了，要不然你用的多线程下载工具是怎么工作的，呵呵


某些多线程下载工具是通过创建临时文件，最后再合并的方式工作的。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
antigloss

论坛徽章:
0
6楼 [报告]
发表于 2007-06-17 18:24 |只看该作者
用lseek+read+write也可以
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
ypxing

论坛徽章:
0
7楼 [报告]
发表于 2007-06-17 20:03 |只看该作者
原帖由 MMMIX 于 2007-6-17 17:14 发表

某些多线程下载工具是通过创建临时文件，最后再合并的方式工作的。


对，俺就用curl写了脚本，来多进程下载一个文件
先创建多个临时文件，然后合并，
不过，总觉得这样有点笨拙
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
net_robber

论坛徽章:
0
8楼 [报告]
发表于 2007-06-17 20:38 |只看该作者
我觉得楼上方法比较好
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
flw2

论坛徽章:
0
9楼 [报告]
发表于 2007-06-17 20:49 |只看该作者
多线程原理是什么？只要服务器提供下载的<file,pos,len>?
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
converse

论坛徽章:
0
10楼 [报告]
发表于 2007-06-17 21:00 |只看该作者
多线程下载的原理应该是首先知道客户端要求有多少线程一起进行下载，其次得到文件的长度，根据这个长度划分每个线程下载的区域，然后下载到临时文件中，最后合并之。

以上，只是最一般的原理，应该还有一些细节上的东西没有涉及到。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
12下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP