多线程如何同时读写同一个文件？

linux_c_py_php

upfantasy 发表于 2013-02-20 08:30
回复 7# linux_c_py_php

这个你说的不对，你看看迅雷下载，都是并发写的。

迅雷是为了网络并发下载减少下载时间, 人家分content-range下载当然快了, 磁盘那点寻道可以忽略了.

hellioncu

读写不同区域可以不加锁并发

morris2600

多线程中分别打开同一个文件？
回复 22# hellioncu


   

hellioncu

morris2600 发表于 2013-02-20 16:17
多线程中分别打开同一个文件？
回复 22# hellioncu

嗯，或者用pread/pwrite

tansijie

加个 flock 排它锁就行了，对要写的一段位置加锁，写完成就释放锁就行。

upfantasy

回复 24# hellioncu


我使用_sopen来做了，可以多线程同时读写同一文件,列位，觉得怎么样？


   

file3

硬盘的读写速度比网络传输速度大，迅雷不必考虑硬盘读写。

cxytz01

回复 18# upfantasy

迅雷可不可以这样，不并发写？

而是并发下载，存到一个缓冲中。另一个线程不断的扫这个缓冲，发现达到一定的阈值就写磁盘。

oracle可是这么干的。所有对数据库的修改都是放在缓冲中，然后另一个重做日志进程，将缓冲中的脏数据（改动过的）写入重做日志中。同时写进程监视这些脏缓冲，达到阈值就写数据库.
   

upfantasy

回复 28# cxytz01
我可以明确告诉你，迅雷下载是多线程下载，每个线程下载文件的某一块。下载之前在本地生成一个固定大小的稀释文件，下载来的文件块都是并发写到该稀释文件中。这个我已经实现了。


   

cxytz01

{:3_189:}