免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 3677 | 回复: 19
打印 上一主题 下一主题

读取文件那种方法效率更好? [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2013-09-11 14:24 |只看该作者 |倒序浏览
比如我要读取一个文件进行某些分析操作,我现在想到的两种方法,一种逐行读取分析,一种是把文件一次性读取到某个数组,然后对数组进行分析操作:
逐行的:
open(IN,"abc");
while(<IN>){
...
...
...
...
}
close(IN);
数组操作的:
open(IN,"abc");
@lines=<IN>;
close(IN);
foreach $line (@lines){
...
...
...
}

这两种方式那种更高效呢?

论坛徽章:
0
2 [报告]
发表于 2013-09-11 15:02 |只看该作者
要看你的数据量有多大,后面要如何操作。

论坛徽章:
0
3 [报告]
发表于 2013-09-11 15:07 |只看该作者
本帖最后由 justu78 于 2013-09-11 15:13 编辑
iamlimeng 发表于 2013-09-11 15:02
要看你的数据量有多大,后面要如何操作。

只是读取原文件,不对原文件改动,获取文件文件内容并加以分析供程序使用而已
理论上那个更高效?不论原文件的大小如何

论坛徽章:
3
CU十二周年纪念徽章
日期:2013-10-24 15:41:34子鼠
日期:2013-12-14 14:57:19射手座
日期:2014-04-25 21:23:23
4 [报告]
发表于 2013-09-11 15:12 |只看该作者
只要内存够大{:3_186:}  就读数组

论坛徽章:
0
5 [报告]
发表于 2013-09-11 15:14 |只看该作者
mcshell 发表于 2013-09-11 15:12
只要内存够大  就读数组

逐行的方式,对perl来说不是直接把整个文件读入内存或者缓存的吗?

论坛徽章:
3
CU十二周年纪念徽章
日期:2013-10-24 15:41:34子鼠
日期:2013-12-14 14:57:19射手座
日期:2014-04-25 21:23:23
6 [报告]
发表于 2013-09-11 15:40 |只看该作者
回复 5# justu78


    不是,想怎么读都可以。
还有可以改变$/变量,控制读取行 还是整个文本

论坛徽章:
0
7 [报告]
发表于 2013-09-11 17:23 |只看该作者
我网上查了并测试了下,如果只是测试读取某个文件到数组的话,下面的方式最快:
local $/;
$line=<IN>;
@lines=split(/\n/,$line);
$/="\n";

论坛徽章:
0
8 [报告]
发表于 2013-09-11 20:26 |只看该作者
逐行读效率要高些 ---《perl高效编程 p127》

论坛徽章:
0
9 [报告]
发表于 2013-09-12 09:38 |只看该作者
lhohoz 发表于 2013-09-11 20:26
逐行读效率要高些 ---《perl高效编程 p127》

但是实测不是如此

论坛徽章:
46
15-16赛季CBA联赛之四川
日期:2018-03-27 11:59:132015年亚洲杯之沙特阿拉伯
日期:2015-04-11 17:31:45天蝎座
日期:2015-03-25 16:56:49双鱼座
日期:2015-03-25 16:56:30摩羯座
日期:2015-03-25 16:56:09巳蛇
日期:2015-03-25 16:55:30卯兔
日期:2015-03-25 16:54:29子鼠
日期:2015-03-25 16:53:59申猴
日期:2015-03-25 16:53:29寅虎
日期:2015-03-25 16:52:29羊年新春福章
日期:2015-03-25 16:51:212015亚冠之布里斯班狮吼
日期:2015-07-13 10:44:56
10 [报告]
发表于 2013-09-12 10:16 |只看该作者
精神可嘉但真没什么意思,文件小差不了多少,文件大不可能全读,至于中间地带欢迎贴出测试及结果
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP