Linux 多个文件的异步IO问题，高手请进。。。

fm971

原帖由 bittertea 于 2009-5-15 17:59 发表
看看libevent的架构或许对你有帮助, 里面有对IO/信号/timer的封装, 当某种事件发生变化时, 会将事件从事件监视队列(定时器min-heap堆)移到活跃队列里, 按事件发生顺序依次调度执行事件发生回调函数.

原帖由 wwwsq 于 2009-5-15 18:52 发表



内存缓存，然后批量写入。
硬盘连续读写的速度是大大高于随机读写的。

多谢指点。 综合各位的建议， 我现在总结出另一种方案， 请你们看看是否可行？

给每路视频流开4M缓存，当接收到2M数据以上，才调用AIO写。每次只写一个文件。这样可以减少IO调用的次数。
视频流的码率一般不超过4Mbps，即0.5MB每秒。
上述方案有一个问题是， 当某一个文件出错时，可能会阻塞后面的文件。不能实现每个文件的并行。

cookis

不要太理想化了，磁盘I／O不会阻塞，就算是有阻塞，肯定是磁盘出问题了，既然磁盘出问题了，那么你的服务阻塞住也没关系了。

fm971

原帖由 cookis 于 2009-5-18 14:18 发表
不要太理想化了，磁盘I／O不会阻塞，就算是有阻塞，肯定是磁盘出问题了，既然磁盘出问题了，那么你的服务阻塞住也没关系了。

先谢谢你的观点。  我使用异步IO是考虑到磁盘会是NAS或SAN，所以想尽量减少应用这边的开销，才能最大化并发性能。  估计用100个线程来写100个文件，也不会造成瓶颈。但是再继续扩展其它的服务，可扩展性差一些。