在Winodws上以磁盘的最大速度持续存储二进制文件

notbusy

环境是WindowsServer2008R2 64bit，Intel Core i7-940 2.93GHz，12G DDR3， 磁盘标定最高速度是300MByte/sec，做了RAID0。

每430ms从图像采集卡取得80MByte数据存入硬盘，也就是186MByte/sec。
用HALCON(一个图像处理库)的API存储能达到277MByte/sec。
可是我用fwrite, _write, WriteFile只能达到98MByte/sec, 185MByte/sec和108MByte/sec。

因为是大块二进制文件保存，不需要随机读取，我调整了WriteFile的参数，
比如用FILE_FLAG_NOBUFFERING | FILE_FLAG_WRITETHROUGH来取消库和OS的Cach。但是都达不到HALCON的速度。

请问有什么优化方法能够消除操作系统的影响，让硬盘发挥最大存储速度的方法吗？
请给点儿线索，提示。谢谢。

prolj

有些数据库支持裸设备

happy_fish100

回复 1# notbusy

LZ做的对比测试，都是通过写一个大文件来测试写入速度的么？

hellioncu

先用个硬盘性能测试工具试试写入性能

irp

CreateFile(FILE_FLAG_NOBUFFERING | FILE_FLAG_WRITETHROUGH |FILE_FLAG_OVERLAPPED)
必须enable asynchronous i/o, 连续issue多个异步写，注意buffer按照磁盘扇区对齐,可以结合i/o
completion port来做i/o.

irp

看下这篇kb也许有帮助，http://support.microsoft.com/kb/156932

notbusy

回复 2# prolj

数据库放在另一台机器上，用于图像采集的这台机器只做采集和最基本的预处理然后放到本地硬盘。之后转移到别的机器里，做图像处理最后放入数据库。

notbusy

回复 3# happy_fish100

是，测试的程序很简单，malloc一块内存，70MByte，对齐到sector大小。反复执行open/write/close，写入硬盘的同一个文件。
这个方法有问题吗？有什么特别需要注意的问题吗？我是对我要做的写文件操作做了简化后写的简单的性能测试程序。

notbusy

回复 4# hellioncu

因为HALCON的性能基本接近硬盘标定最大吞吐速度，也满足我的性能要求，就没有再用专门的工具，工具的各个侧重点不同，有的是测试文件系统的，有的是测试缓存的，和我的SPEC并不完全一致。还有就是h2benchw的免费版不提供write测试，我也就不想多费事了。呵呵。

peidright

。。。哦，不是开源的。这个api的申明是？

是不是其他的方式，影响了写入速度呢？  比如它自己实现了缓存。