免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 3636 | 回复: 12
打印 上一主题 下一主题

请教,为何我的程序做1百万行的文件处理需要20多分钟????太慢了~!!!! [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2008-04-29 16:23 |只看该作者 |倒序浏览
问题已解决。谢谢各位。

[ 本帖最后由 zhaofei1318 于 2008-4-29 17:35 编辑 ]

评分

参与人数 1可用积分 -5 信誉积分 -5 收起 理由
flw -5 -5 leech

查看全部评分

论坛徽章:
0
2 [报告]
发表于 2008-04-29 16:24 |只看该作者
我把文件全部读到数组中也是一样的慢/

论坛徽章:
0
3 [报告]
发表于 2008-04-29 16:37 |只看该作者
不用一次读入数组中,用<读,>写
while(FILE)
{
....
}

这样试试看

论坛徽章:
0
4 [报告]
发表于 2008-04-29 16:42 |只看该作者

回复 #3 converse 的帖子

试过也不行。
第一个while循环速度很快,关键是第二个while循环较慢。

论坛徽章:
0
5 [报告]
发表于 2008-04-29 16:51 |只看该作者
perl写成这样的确不太好,你贴一下读入的文件格式吧。
不过我对不到一秒深表怀疑。

论坛徽章:
0
6 [报告]
发表于 2008-04-29 16:59 |只看该作者

回复 #5 xiaoyafeng 的帖子

确实不到一秒,这个因该和文件格式无关,功能应该是没问题的,关键在于代码的优化。perl不是很熟,那位高说给分析一下。

[ 本帖最后由 zhaofei1318 于 2008-4-29 17:03 编辑 ]

论坛徽章:
0
7 [报告]
发表于 2008-04-29 17:04 |只看该作者
关于过滤,为什么不用grep, map 之类的???

论坛徽章:
0
8 [报告]
发表于 2008-04-29 17:06 |只看该作者
可以阿。shell实现很简单,我只是想知道为什么perl会这么慢。

论坛徽章:
0
9 [报告]
发表于 2008-04-29 17:12 |只看该作者
我是指perl 中 grep, map 。
你写的那些对数组操作可能很费时。好像数组很大时,push,pop 之类的,比较费时。

论坛徽章:
0
10 [报告]
发表于 2008-04-29 17:34 |只看该作者
原帖由 forlorngenius 于 2008-4-29 17:12 发表
我是指perl 中 grep, map 。
你写的那些对数组操作可能很费时。好像数组很大时,push,pop 之类的,比较费时。


谢谢这位老兄你所说的确实是问题之一。问题已解决,最后3秒搞定。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP