如何快速替换/修改大文件其中的一行？

peidright

回复 10# donglongchao


    mmap 不写，不会读到内存的

samlumengjun

回复 10# donglongchao


    建议你man一下mmap, 比如你要修改的地方在文件100个字节偏移处,要修改10个字节,那么你就从100个字节偏移处mmap,长度10个字节.

donglongchao

回复 12# samlumengjun
不止是修改，如果希望在某个地方插入数据，即改变文件长度，是不是还是不行？

mirnshi

从头开始读取、匹配、替换。一个while循环

mgqw

那就用awk，一次读一行

samlumengjun

回复 13# donglongchao


    你的这种需求好象除了全部mmap进来外,还要增加一点冗余空间才能满足.不过这样也是最方便最高效的实现方法了,如果内存不够的话,那么可能只有把文件分成几块处理了.

rain_fish

RT。
如果文件较大，几百兆或者上G，但是只需要替换/修改其中的某一行，如何才能速度更快？能不能不全读出 ...
donglongchao 发表于 2010-07-14 17:47

    读取一行，检查，然后写入到另一个文件中，相当于复制一份文件，行不？

donglongchao

读取一行，检查，然后写入到另一个文件中，相当于复制一份文件，行不？
rain_fish 发表于 2010-07-15 11:10

这种方法应该和全部读出再全部写入差不多吧。
根本上说可能是现有文件系统不直接支持这种操作吧。需要人工hack。。。

rain_fish

这种方法应该和全部读出再全部写入差不多吧。
根本上说可能是现有文件系统不直接支持这种操作吧。需要人 ...
donglongchao 发表于 2010-07-15 11:21

    有点不一样，一行一行的读就不需要把几G的文件全部放到内存。。

donglongchao

有点不一样，一行一行的读就不需要把几G的文件全部放到内存。。
rain_fish 发表于 2010-07-15 11:23

但是你至少要保证复制后的文件要全部包含原文件的内容， 还是需要全部读出 。