一个文件被多个字符串多次过滤，如何提升性能？

richardzhangs

例如过滤字符串为"123"，文件为a.txt，每行的第2到第四个字符为"123"的行去掉，然后过滤字符串变为“234”，同样每行的第2到第四个字符为"234"的行去掉，这样被多个字符串过滤
一个想法是：对a.txt用ifstream打开，建立一个临时文件b.txt，用ofstream打开。对a.txt采用getline()读取每一行到一个字符串变量，根据过滤条件过滤到b.txt里，然后删除a.txt，重命名b.txt为a.txt。这样不断进行肯定效率不高，毕竟建立文件，删除文件的效率不高吧
请问如何提升性能呢？

peidright

一次性全部读入内存

cugb_cat

文件很大？脚本很容易搞定的啊，干嘛要用C++？

richardzhangs

回复楼上的：文件很大，而且用shell实现起来速度也不一定更快吧，shell最终不也是调用系统函数吗？

net_robber

C也是调用系统函数，都一样

prolj

那么麻烦干嘛？全部读入内存。

lovefreex

内存映射文件？

richardzhangs

没直接操作过内存。
能不能我用一个链表存这个文件：链表中的每一项代表文件中的一行，每次过滤时遍历这个链表，如果某一项要过滤掉，则相当于去掉一项，过滤n次后，直接遍历这个链表存放进另一个文件中
这样操作快吗？

prolj

算了，直接grep吧

churchmice

脚本语言正适合干这个，说不定效率反而更高
谁说c/c++的效率一定要比脚本语言高了?