同样的程序，同样的文本格式，一个20W行，一个100W行，为什么执行时间相差那么多?

ste2008

同样的程序，同样的文本格式，一个20W行，一个100W行
程序主要是校验每行的数据是否正确，校验的时候，没有用到任何数组，哈希
只是正则匹配了每行，如果能匹配就打印，不能匹配就不打印
同样的程序
同样的文本格式
20w行的文本执行了6秒
而100w行的文本执行了90秒

不理解，我觉得应该是100W行30秒

是不是打印的文件大了，所以执行的时间没有按比例结束？

路小佳

控制台是慢设备（字符设备），费时在这上面吧。

ste2008

原帖由 路小佳 于 2007-4-3 20:42 发表
控制台是慢设备（字符设备），费时在这上面吧。

什么意思啊？不解，谢谢

xxmone

请问你是输出到哪里？

是文件还是屏幕？

ste2008

原帖由 xxmone 于 2007-4-4 10:15 发表
请问你是输出到哪里？

是文件还是屏幕？

文件

xxmone

再问一下，你的100W行的输出文件的大小是20w行输出文件大小的5倍吗？

xxmone

你可以试一下先写到内存中，匹配完成后一起写入文件，比较一下两个文件的速度，应该就不会差那么多了，我觉得跟输出到文件有很大的关系。

ste2008

原帖由 xxmone 于 2007-4-4 11:21 发表
再问一下，你的100W行的输出文件的大小是20w行输出文件大小的5倍吗？

我开始也怀疑是否尺寸的问题
后来检查了，100W的是380M,
30W的文件是70多M

ste2008

原帖由 xxmone 于 2007-4-4 11:46 发表
你可以试一下先写到内存中，匹配完成后一起写入文件，比较一下两个文件的速度，应该就不会差那么多了，我觉得跟输出到文件有很大的关系。

先写到内存中？写得下吗？
如果1000W呢？

xxmone

你的内存没有380M吗？
如果是1000w，你可以做计数，匹配100w个数据后，写一次文件，
如果你的程序要处理的是1000w行的文件，你应该想想它的效率了。呵呵！！