免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 21169 | 回复: 58
打印 上一主题 下一主题

如何控制perl程序的内存? [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2010-05-13 17:11 |只看该作者 |倒序浏览
读取一个全是字符的100M大小的文件存到一个标量里,然后按空分开存到一个数组里,为什么内存飞涨呢?大概要十几G的内存。
理论上是不需要这么多内存的啊?perl对此到底是如何分配内存的啊?请求高人指点!谢谢!

论坛徽章:
0
2 [报告]
发表于 2010-05-13 17:14 |只看该作者
上源码

论坛徽章:
0
3 [报告]
发表于 2010-05-13 17:34 |只看该作者
上代码

论坛徽章:
0
4 [报告]
发表于 2010-05-13 17:46 |只看该作者
回复 2# toniz


    my $a;
    while (<>){
            chomp;
             $a .= $_;
    }

    my @a = split //, $a;

这就是主要的代码。

论坛徽章:
0
5 [报告]
发表于 2010-05-13 18:00 |只看该作者
这代码肯定完蛋~~

论坛徽章:
0
6 [报告]
发表于 2010-05-13 18:02 |只看该作者
回复 4# glauke


    那个$a看上去没有什么意义.  还不确定占用内存大是否和反复拼接字符串有关, 去掉试验下.

  1. my @foo;
  2. while(<>){
  3.   chomp;
  4.   push @foo, split //, $_;
  5. }
复制代码

论坛徽章:
0
7 [报告]
发表于 2010-05-13 18:08 |只看该作者
回复 5# toniz


    为什么呢?除了楼下的方法还有比较高级的写法吗?虚心请教!
   关键我的疑惑是就算存到变量里也不应占用如此大内存啊?这是怎么回事呢?

论坛徽章:
0
8 [报告]
发表于 2010-05-13 18:25 |只看该作者
问题在这里:split //, $_;
100M文件该有多少字符啊。。。。

论坛徽章:
0
9 [报告]
发表于 2010-05-13 18:30 |只看该作者
这个什么写法效率应该都差不多了。
将文件的每个字符都存到一个数组,这个数组的下标该有多大。。。。耗光内存很正常的。

论坛徽章:
0
10 [报告]
发表于 2010-05-13 18:39 |只看该作者
perl 不是一个字符就是一个char的内存,把你的理论值乘以10,得到的才是perl实际可能消耗内存的最小值……
perl的标量会有许多内容,正是因为消耗了大量的空间,才能取得时间上的高效
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP